电子发烧友App

硬声App

扫码添加小助手

加入工程师交流群

0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示
电子发烧友网>电子资料下载>电子资料>NVIDIA Image Scaling英伟达开发的图像缩放技术

NVIDIA Image Scaling英伟达开发的图像缩放技术

2022-05-30 | zip | 26.73 MB | 次下载 | 2积分

资料介绍

授权协议 MIT
开发语言 C/C++
操作系统 跨平台
软件类型 开源软件

软件简介

NVIDIA Image Scaling SDK 为跨平台支持提供了单一的空间缩放和锐化算法。缩放算法使用 6-tap 缩放过滤器,结合了 4 个方向缩放和自适应锐化过滤器,可创建平滑的图像和锐利的边缘。此外,SDK 提供了最先进的自适应方向锐化算法,用于不需要缩放的应用程序。

色彩空间和范围

NVIDIA Image Scaling 着色器可以处理存储为 LDR 或 HDR 的颜色纹理,但有以下限制:

  1. LDR
    • 颜色值的范围必须在 [0, 1] 范围内
    • 应用色调映射和 OETF(伽马校正)后,输入颜色纹理必须处于显示参考颜色空间中
  2. HDR PQ
    • 颜色值的范围必须在 [0, 1] 范围内
    • 在应用了 Rec.2020 PQ OETF 的色调映射后,输入颜色纹理必须在显示参考颜色空间中
  3. HDR 线性
    • 推荐的颜色值范围是 [0, 12.5],其中亮度值(根据 BT.709)1.0 映射到 80nits(sRGB 峰值)的亮度值,12.5 映射到 1000nits
    • 输入颜色纹理可能具有线性和场景参考或线性和显示参考(色调映射后)的亮度值

资源状态、缓冲区和采样器:

调用 NVIDIA Image Scaling SDK 着色器的游戏或应用程序必须确保纹理处于正确状态。

  • 输入颜色纹理必须处于像素着色器读取状态。DirectX 中的着色器资源视图 (SRV)
  • 输出纹理必须处于读/写状态。DirectX 中的无序访问视图 (UAV)
  • NVScaler 的系数纹理必须处于读取状态。DirectX 中的着色器资源视图 (SRV)
  • 配置变量必须作为常量缓冲区传递。DirectX 中的常量缓冲区视图 (CBV)
  • ……

最佳着色器设置

为了在当前和未来的硬件上获得 NvScaler 和 NvSharpen 的最佳性能,建议使用以下 API 来获取 NIS_BLOCK_WIDTH、NIS_BLOCK_HEIGHT 和 NIS_THREAD_GROUP_SIZE 的值。

enum class NISGPUArchitecture : uint32_t
{
    NVIDIA_Generic = 0,
    AMD_Generic = 1,
    Intel_Generic = 2
};
struct NISOptimizer
{
    bool isUpscaling;
    NISGPUArchitecture gpuArch;

    NISOptimizer(bool isUpscaling = true,
                 NISGPUArchitecture gpuArch = NISGPUArchitecture::NVIDIA_Generic);
    uint32_t GetOptimalBlockWidth();
    uint32_t GetOptimalBlockHeight();
    uint32_t GetOptimalThreadGroupSize();
};

HDR 着色器设置

使用以下枚举值设置 NIS_HDR_MODE

enum class NISHDRMode : uint32_t
{
    None = 0,
    Linear = 1,
    PQ = 2
};

NVScaler 的集成

编译 NIS_Main.hlsl 着色器

NIS_SCALER 应该设置为 1,并且 isUscaling 应该作为 true 传递。

NISOptimizer opt(true, NISGPUArchitecture::NVIDIA_Generic);
uint32_t blockWidth = opt.GetOptimalBlockWidth();
uint32_t blockHeight = opt.GetOptimalBlockHeight();
uint32_t threadGroupSize = opt.GetOptimalThreadGroupSize();

Defines defines;
defines.add("NIS_SCALER", true);
defines.add("NIS_HDR_MODE", hdrMode);
defines.add("NIS_BLOCK_WIDTH", blockWidth);
defines.add("NIS_BLOCK_HEIGHT", blockHeight);
defines.add("NIS_THREAD_GROUP_SIZE", threadGroupSize);
NVScalerCS = CompileComputeShader(device, "NIS_Main.hlsl”, &defines);

创建 NVIDIA Image Scaling SDK 配置常量缓冲区

struct NISConfig
{
    float kDetectRatio;
    float kDetectThres;
    float kMinContrastRatio;
    float kRatioNorm;
    ...
};

NISConfig config;
createConstBuffer(&config, &csBuffer);

为缩放器和 USM 相位系数创建 SRV 纹理

const int rowPitch = kFilterSize * 4;
const int imageSize = rowPitch * kPhaseCount;

createTexture2D(kFilterSize / 4, kPhaseCount, DXGI_FORMAT_R32G32B32A32_FLOAT, D3D11_USAGE_DEFAULT, coef_scaler, rowPitch, imageSize, &scalerTex);

createTexture2D(kFilterSize / 4, kPhaseCount, DXGI_FORMAT_R32G32B32A32_FLOAT, D3D11_USAGE_DEFAULT, coef_usm, rowPitch, imageSize, &usmTex);

createSRV(scalerTex.Get(), DXGI_FORMAT_R32G32B32A32_FLOAT, &scalerSRV);
createSRV(usmTex.Get(), DXGI_FORMAT_R32G32B32A32_FLOAT, &usmSRV);

创建采样器

createLinearClampSampler(&linearClampSampler);

更新 NVIDIA Image Scaling SDK NVScaler 配置和常量缓冲区

使用以下 API 调用更新 NVIDIA Image Scaling SDK 配置

void NVScalerUpdateConfig(NISConfig& config,
    float sharpness,
    uint32_t inputViewportOriginX, uint32_t inputViewportOriginY,
    uint32_t inputViewportWidth, uint32_t inputViewportHeight,
    uint32_t inputTextureWidth, uint32_t inputTextureHeight,
    uint32_t outputViewportOriginX, uint32_t outputViewportOriginY,
    uint32_t outputViewportWidth, uint32_t outputViewportHeight,
    uint32_t outputTextureWidth, uint32_t outputTextureHeight,
    NISHDRMode hdrMode = NISHDRMode::None
);

每当输入大小、清晰度或比例发生变化时更新常量缓冲区

NVScalerUpdateConfig(m_config, sharpness,
                0, 0, inputWidth, inputHeight, inputWidth, inputHeight,
                0, 0, outputWidth, outputHeight, outputWidth, outputHeight,
                NISHDRMode::None);

updateConstBuffer(&config, csBuffer.Get());

构造

$> cd samples
$> mkdir build
$> cd build
$> cmake ..
 

图像 SDK 英伟达
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

下载该资料的人也在下载 下载该资料的人还在阅读
更多 >

评论

查看更多

下载排行

本周

  1. 1ZX8002D触摸无极调光LED集成IC
  2. 2.43 MB  |  1次下载  |  免费
  3. 2SDDM 激光测距模块产品规格书
  4. 1.11 MB   |  次下载  |  免费
  5. 3西曼传感SDM50激光测模组产品手册
  6. 0.65 MB   |  次下载  |  免费
  7. 4STC8H 系列单片机技术参考手册
  8. 17.85 MB   |  次下载  |  1 积分
  9. 5PC3303 高精度PWM调光LED背光驱动器数据手册
  10. 2.42 MB   |  次下载  |  免费
  11. 6飞腾 FT2000A/2 核心板 天脉 3/VxWorks 机载实时嵌入式国产化开发板
  12. 843.50 KB  |  次下载  |  免费
  13. 7AU-60_全功能AI语音处理模组规格书DY)
  14. 3.18 MB  |  次下载  |  免费
  15. 8WT2003H4录变音芯片及模块说明书V1
  16. 3.61 MB  |  次下载  |  免费

本月

  1. 1瑞芯微RK3572开发板-产品资料更新-2026.06
  2. 3.30 MB  |  4次下载  |  免费
  3. 2四键电容式触摸按键IC FZH34产品手册
  4. 0.41 MB   |  2次下载  |  免费
  5. 3矩形科技 CANopen 远程IO模块产品手册
  6. 7.93 MB   |  2次下载  |  免费
  7. 4高性能非隔离交直流转换芯片 PC9403A数据手册
  8. 0.34 MB   |  2次下载  |  免费
  9. 5OC5721欧创芯开关降压型LED恒流驱动器
  10. 404.39 KB  |  2次下载  |  免费
  11. 6PC9830 18V-3A集成高低侧功率管同步降压转换器数据手册
  12. 9.01 MB   |  1次下载  |  免费
  13. 7GL65P06A8产品光磊 60V 65A P沟道功率 MOSFET
  14. 1.07 MB  |  1次下载  |  免费
  15. 8ZX8002D触摸无极调光LED集成IC
  16. 2.43 MB  |  1次下载  |  免费

总榜

  1. 1matlab软件下载入口
  2. 未知  |  935137次下载  |  10 积分
  3. 2开源硬件-PMP21529.1-4 开关降压/升压双向直流/直流转换器 PCB layout 设计
  4. 1.48MB  |  420064次下载  |  10 积分
  5. 3Altium DXP2002下载入口
  6. 未知  |  233095次下载  |  10 积分
  7. 4电路仿真软件multisim 10.0免费下载
  8. 340992  |  191476次下载  |  10 积分
  9. 5十天学会AVR单片机与C语言视频教程 下载
  10. 158M  |  183362次下载  |  10 积分
  11. 6labview8.5下载
  12. 未知  |  81608次下载  |  10 积分
  13. 7Keil工具MDK-Arm免费下载
  14. 0.02 MB  |  73836次下载  |  10 积分
  15. 8LabVIEW 8.6下载
  16. 未知  |  65992次下载  |  10 积分