0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AI图像放大技术的演变

工程师兵营 来源:工程师兵营 作者:工程师兵营 2023-07-04 15:20 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

随着 RTX 视频超分辨率 (RTX Video Super Resolution) (VSR) 的发布,GeForce RTX GPU 将提升 PC 版 Google Chrome 和 Microsoft Edge 浏览器上视频内容的质量。

如今,近 80% 的互联网流量来自于直播视频。其中 90% 的内容在 1080p 或更低的分辨率下传输,包括斗鱼,虎牙,哔哩哔哩等热门平台上的直播视频。

然而,当观众(如 PC 用户)使用高于 1080p 分辨率的显示器时,浏览器必须缩放视频以匹配显示器的分辨率。大多数浏览器使用基础的放大技术,这导致最终的图像色彩不够亮丽或画面模糊。

通过 RTX VSR,GeForce RTX 40 和 30 系列 GPU 用户可以利用 AI 将较低分辨率的内容提升到 4K,与他们的显示器分辨率相匹配。该技术中的 AI 可消除块状的压缩伪影,提高视频的锐度和清晰度。

就像戴上有度数的眼镜可以瞬间聚焦全世界一样,RTX 视频超分辨率 (RTX Video Super Resolution) 让 GeForce RTX 40 和 30 系列 PC 的用户能以清晰的画面观看视频直播。

玩家现可通过下载最新版 GeForce Game Ready 驱动获取 RTX VSR 支持,该驱动还为《原子之心》(Atomic Heart)和 THE FINALS 封测版等新推出的全新游戏带来最佳体验。

AI 图像放大技术 (AI upscaling) 的演变

AI图像放大技术 (AI upscaling) 是将低分辨率图像转换为高分辨率图像的过程,其通过将低分辨率图像输入深度学习模型来预测生成高分辨率图像。为提升预测准确性,神经网络模型必须在不同分辨率下用无数图像进行训练。

然后,部署的 AI 模型可以为低分辨率的视频带来令人难以置信的清晰度和丰富细节,这是传统的缩放技术无法重建的。AI 模型使边缘更锐利,毛发更真实,风景更清晰。

2019年,该技术的早期版本和 SHIELD TV 同时发布。该突破改进了针对电视的串流内容,针对从480p 分辨率到 1080p 分辨率的视频流,并优化120 寸屏幕的观看体验。

由于 4K 显示器不得不拉伸低分辨率图像以适应屏幕,导致视觉效果变得模糊。使用 AI 提升直播视频质量,让低分辨率的图像无与伦比的清晰。

PC 观众通常比电视观众更靠近显示器,因此需要更高等级的处理和细化来实现图像放大。用户可在GeForce RTX 40 和 30 系列 GPU 所拥有的极其强大的 Tensor Cores AI 处理器作用下,通过 RTX VSR 开启新一代的 AI 图像放大体验。

RTX 视频超分辨率 (RTX Video Super Resolution) 如何工作

RTX VSR是 AI 图像处理的一个突破,它超越了传统的边缘检测和特征锐化技术,极大地提升直播视频内容的质量。

块状的压缩伪影是直播视频长期存在的问题。无论是服务器、客户端还是内容本身的错误,在传统的图像放大中上述问题往往被放大,给直播观众带来不太愉快的观看体验。

RTX VSR 可减少或消除因压缩视频而产生的伪影, 如块效应、边缘的振铃伪影、高频细节的消失和平坦区域的带状现象, 同时减少纹理损失。它还能锐化边缘和丰富细节。

该技术使用深度学习网络,在单次推理中进行图像放大和减少压缩伪影。该网络分析低分辨率的视频帧并预测目标分辨率下的残差图像。然后,残差图像被叠加到传统的图像增强上,纠正伪影错误并锐化边缘以匹配输出分辨率。

该深度学习网络使用不同压缩程度的内容进行训练。它学习那些在未压缩图像中不存在,但存在于低分辨率或低质量视频中的压缩伪影的类型,把这些伪影及其未压缩图像作为网络训练的参考。深度学习网络还进行广泛的视觉评估,确保生成的模型适用于几乎所有的真实世界和游戏内容。

启用 RTX VSR

RTX VSR 需要使用 GeForce RTX 40 或 30 系列 GPU,并且几乎适用于 Google Chrome 和 Microsoft Edge 浏览器中的所有视频内容。

欲使用该功能,请更新到最新的 GeForce Game Ready 驱动(现已发布),或将于 3 月份发布的下一个NVIDIA Studio 驱动。Chrome 浏览器(110.0.5481.105 或更高版本)和 Edge 浏览器(110.0.1587.56 版)近期已新增 RTX VSR 支持。

要开启该技术,请打开 NVIDIA 控制面板,并打开”调整视频图像设置”。勾选”RTX 视频增强”下的超分辨率框,并选择质量 1 到 4 中的一个等级——质量等级表示图像增强的质量并且也有赖于 GPU 性能。

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 图像
    +关注

    关注

    2

    文章

    1096

    浏览量

    42169
  • AI
    AI
    +关注

    关注

    90

    文章

    38233

    浏览量

    297127
  • 人工智能
    +关注

    关注

    1813

    文章

    49772

    浏览量

    261733
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI的科学应用

    和量子计算的两项新兴的技术,将在生产假说方面发挥重要作用,从而改变科学发现的范式。 生成式AI: 2、穷举搜索 3、分析排错与组合优化 分析排错是生成假说的重要手段。强化学习也在优化假说组合、寻找科学发现
    发表于 09-17 11:45

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片的需求和挑战

    AI的应用多种多样。比如:DALL-E2、Midjourney、Stable Diffusion等,不仅包括对话功能,还包括生成图像、视频、语音和程序代码等功能。 竟然连代码都可以生成,会取代程序员
    发表于 09-12 16:07

    【「AI芯片:科技探索与AGI愿景」阅读体验】+可期之变:从AI硬件到AI湿件

    的不同。随着AI热潮的兴起,大脑的抽象模型已被提炼成各种的AI算法,并使用半导体芯片技术加以实现。 而大脑是一个由无数神经元通过突触连接而成的复杂网络,是极其复杂和精密的。大脑在本质上就是一台湿润的软组织
    发表于 09-06 19:12

    【Sipeed MaixCAM Pro开发板试用体验】基于MaixCAM-Pro的AI生成图像鉴别系统

    技术落地到了一个小小的边缘设备MaixCAM-Pro上。它不仅展示了深度学习在图像取证领域的强大能力,更体现了边缘AI在现实世界中的应用价值——无需依赖云端,即可在本地快速、安全、低成本地完成复杂智能
    发表于 08-21 13:59

    AI 芯片浪潮下,职场晋升新契机?

    职场、渴望在专业领域更进一步的人来说,AI 芯片与职称评审之间,实则有着千丝万缕的联系,为职业晋升开辟了新的路径。 AI 芯片领域细分与职称对应 目前,AI 芯片从技术架构上主要分为
    发表于 08-19 08:58

    任正非说 AI已经确定是第四次工业革命 那么如何从容地加入进来呢?

    实践。 为开源项目贡献代码或者文档。比如,帮助完善一个机器学习数据集的加载模块的代码,或者撰写某个AI算法的使用说明文档。这不仅可以提升自己的技术能力,还能在AI社区中建立自己的声誉。 个人项目实践
    发表于 07-08 17:44

    边缘AI的优势和技术基石

    在万物皆可AI(人工智能)的今天,市场上几乎每家企业都在宣称自己的业务中有了AI成分。因此,将AI接入极靠近终端客户的网络边缘也就没什么悬念了。这里的边缘人工智能(即Edge AI,或
    的头像 发表于 06-12 10:14 1210次阅读
    边缘<b class='flag-5'>AI</b>的优势和<b class='flag-5'>技术</b>基石

    国科微AI ISP品牌 “圆鸮”震撼发布,推动图像处理技术跨越升级​

    4 月 22 日,国科微正式发布新一代自研AI图像处理引擎(AI ISP)品牌——圆鸮,标志着公司在人工智能与图像处理技术融合领域迈出关键一
    发表于 04-22 18:53 1166次阅读

    浅谈MOS管封装技术演变

    随着智能设备的普及,电子设备也朝着小型化、高性能和可靠性方向发展。摩尔定律趋缓背景下,封装技术成为提升性能的关键路径。从传统的TO封装到先进封装,MOS管的封装技术经历了许多变革,从而间接地影响到了智能应用的表现。合科泰将带您深入探讨MOS管封装
    的头像 发表于 04-08 11:29 1105次阅读
    浅谈MOS管封装<b class='flag-5'>技术</b>的<b class='flag-5'>演变</b>

    岸桥箱号识别系统如何工作?揭秘AI图像识别技术

    在港口自动化升级的浪潮中,AI岸桥识别系统凭借前沿的图像识别技术,成为提升码头作业效率的“智慧之眼”。那么,这套系统如何实现集装箱信息的精准捕捉?又是如何通过AI
    的头像 发表于 04-02 09:45 544次阅读

    中科亿海微SoM模组——AI图像推理解决方案

    随着AI技术的快速发展,AI图像推理作为一种高效、智能的图像处理技术,已成为推动各行业数字化转型
    的头像 发表于 03-27 13:48 656次阅读
    中科亿海微SoM模组——<b class='flag-5'>AI</b><b class='flag-5'>图像</b>推理解决方案

    浅谈光模块的演变与创新

    对更高数据传输速率的需求呈指数级增长,是由数据中心、云计算的需求所驱动的。光模块作为光通信系统的基础构件,正处于这一演变的前沿。模块速度和形态从400G到1.6T的演变,速度增强技术,以及实现高速光模块的路径。
    的头像 发表于 02-21 09:15 1301次阅读
    浅谈光模块的<b class='flag-5'>演变</b>与创新

    行业集结:共同定制 RK3566 集成 AI 眼镜的前沿 AR 方案

    技术革新浪潮席卷全球的当下,一款智能视觉终端设备 —— 以 AI 眼镜为典型代表,正以革命性姿态打破物理与数字世界的藩篱,在虚实交融的界面中搭建起多维度的认知通道。 而深圳市新创云智能科技有限公司
    发表于 02-20 18:44

    图像采集卡:现代图像处理技术的关键组件

    在现代科技快速发展的背景下,图像处理技术已成为信息技术领域不可或缺的一部分。图像采集卡,作为连接计算机与各种图像采集设备的重要硬件组件,扮演
    的头像 发表于 02-20 10:42 949次阅读
    <b class='flag-5'>图像</b>采集卡:现代<b class='flag-5'>图像</b>处理<b class='flag-5'>技术</b>的关键组件

    AI技术与PLC编程融合

    如何将AI技术融入PLC编程软件
    发表于 02-14 15:55