0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AI图像放大技术的演变

工程师兵营 来源:工程师兵营 作者:工程师兵营 2023-07-04 15:20 次阅读

随着 RTX 视频超分辨率 (RTX Video Super Resolution) (VSR) 的发布,GeForce RTX GPU 将提升 PC 版 Google Chrome 和 Microsoft Edge 浏览器上视频内容的质量。

如今,近 80% 的互联网流量来自于直播视频。其中 90% 的内容在 1080p 或更低的分辨率下传输,包括斗鱼,虎牙,哔哩哔哩等热门平台上的直播视频。

然而,当观众(如 PC 用户)使用高于 1080p 分辨率的显示器时,浏览器必须缩放视频以匹配显示器的分辨率。大多数浏览器使用基础的放大技术,这导致最终的图像色彩不够亮丽或画面模糊。

通过 RTX VSR,GeForce RTX 40 和 30 系列 GPU 用户可以利用 AI 将较低分辨率的内容提升到 4K,与他们的显示器分辨率相匹配。该技术中的 AI 可消除块状的压缩伪影,提高视频的锐度和清晰度。

就像戴上有度数的眼镜可以瞬间聚焦全世界一样,RTX 视频超分辨率 (RTX Video Super Resolution) 让 GeForce RTX 40 和 30 系列 PC 的用户能以清晰的画面观看视频直播。

玩家现可通过下载最新版 GeForce Game Ready 驱动获取 RTX VSR 支持,该驱动还为《原子之心》(Atomic Heart)和 THE FINALS 封测版等新推出的全新游戏带来最佳体验。

AI 图像放大技术 (AI upscaling) 的演变

AI图像放大技术 (AI upscaling) 是将低分辨率图像转换为高分辨率图像的过程,其通过将低分辨率图像输入深度学习模型来预测生成高分辨率图像。为提升预测准确性,神经网络模型必须在不同分辨率下用无数图像进行训练。

然后,部署的 AI 模型可以为低分辨率的视频带来令人难以置信的清晰度和丰富细节,这是传统的缩放技术无法重建的。AI 模型使边缘更锐利,毛发更真实,风景更清晰。

2019年,该技术的早期版本和 SHIELD TV 同时发布。该突破改进了针对电视的串流内容,针对从480p 分辨率到 1080p 分辨率的视频流,并优化120 寸屏幕的观看体验。

由于 4K 显示器不得不拉伸低分辨率图像以适应屏幕,导致视觉效果变得模糊。使用 AI 提升直播视频质量,让低分辨率的图像无与伦比的清晰。

PC 观众通常比电视观众更靠近显示器,因此需要更高等级的处理和细化来实现图像放大。用户可在GeForce RTX 40 和 30 系列 GPU 所拥有的极其强大的 Tensor Cores AI 处理器作用下,通过 RTX VSR 开启新一代的 AI 图像放大体验。

RTX 视频超分辨率 (RTX Video Super Resolution) 如何工作

RTX VSR是 AI 图像处理的一个突破,它超越了传统的边缘检测和特征锐化技术,极大地提升直播视频内容的质量。

块状的压缩伪影是直播视频长期存在的问题。无论是服务器、客户端还是内容本身的错误,在传统的图像放大中上述问题往往被放大,给直播观众带来不太愉快的观看体验。

RTX VSR 可减少或消除因压缩视频而产生的伪影, 如块效应、边缘的振铃伪影、高频细节的消失和平坦区域的带状现象, 同时减少纹理损失。它还能锐化边缘和丰富细节。

该技术使用深度学习网络,在单次推理中进行图像放大和减少压缩伪影。该网络分析低分辨率的视频帧并预测目标分辨率下的残差图像。然后,残差图像被叠加到传统的图像增强上,纠正伪影错误并锐化边缘以匹配输出分辨率。

该深度学习网络使用不同压缩程度的内容进行训练。它学习那些在未压缩图像中不存在,但存在于低分辨率或低质量视频中的压缩伪影的类型,把这些伪影及其未压缩图像作为网络训练的参考。深度学习网络还进行广泛的视觉评估,确保生成的模型适用于几乎所有的真实世界和游戏内容。

启用 RTX VSR

RTX VSR 需要使用 GeForce RTX 40 或 30 系列 GPU,并且几乎适用于 Google Chrome 和 Microsoft Edge 浏览器中的所有视频内容。

欲使用该功能,请更新到最新的 GeForce Game Ready 驱动(现已发布),或将于 3 月份发布的下一个NVIDIA Studio 驱动。Chrome 浏览器(110.0.5481.105 或更高版本)和 Edge 浏览器(110.0.1587.56 版)近期已新增 RTX VSR 支持。

要开启该技术,请打开 NVIDIA 控制面板,并打开”调整视频图像设置”。勾选”RTX 视频增强”下的超分辨率框,并选择质量 1 到 4 中的一个等级——质量等级表示图像增强的质量并且也有赖于 GPU 性能。

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 图像
    +关注

    关注

    2

    文章

    1064

    浏览量

    40042
  • AI
    AI
    +关注

    关注

    87

    文章

    26472

    浏览量

    264102
  • 人工智能
    +关注

    关注

    1776

    文章

    43899

    浏览量

    230645
收藏 人收藏

    评论

    相关推荐

    浅谈AI技术在SSD控制器中的应用

    当前AI技术蓬勃发展,深度学习、强化学习等技术不断突破,使得AI图像识别、语音识别、自然语言处理等领域取得了显著成果。
    的头像 发表于 04-20 10:02 163次阅读
    浅谈<b class='flag-5'>AI</b><b class='flag-5'>技术</b>在SSD控制器中的应用

    NanoEdge AI技术原理、应用场景及优势

    NanoEdge AI 是一种基于边缘计算的人工智能技术,旨在将人工智能算法应用于物联网(IoT)设备和传感器。这种技术的核心思想是将数据处理和分析从云端转移到设备本身,从而减少数据传输延迟、降低
    发表于 03-12 08:09

    图像放大后,图像中心显示在 ,图像框中心,

    大家好,视觉 显示 相机图像时,点击 放大工具放大后,如何将大图像的中心 对准图像显示框的中心,,
    发表于 01-24 15:49

    计算机视觉:AI如何识别与理解图像

    计算机视觉是人工智能领域的一个重要分支,它致力于让机器能够像人类一样理解和解释图像。随着深度学习和神经网络的发展,人们对于如何让AI识别和理解图像产生了浓厚的兴趣。本文将探讨计算机视觉中AI
    的头像 发表于 01-12 08:27 656次阅读
    计算机视觉:<b class='flag-5'>AI</b>如何识别与理解<b class='flag-5'>图像</b>

    浅析can技术演变过程

    CAN技术演变 为了了解从 CAN FD 到 CAN XL 的转变,让我们简单回顾一下 CAN 技术演变: 经典 CAN:原始 CAN 协议,最大数据速率为 1 Mbps,有效
    发表于 11-17 11:41 214次阅读
    浅析can<b class='flag-5'>技术</b>的<b class='flag-5'>演变</b>过程

    基于紫光同创FPGA的图像采集及AI加速(盘古50K开发板)

    基于紫光同创FPGA的图像采集及AI加速(盘古50K开发板)
    发表于 11-03 11:02

    思特威AI系列再添三款全性能升级图像传感器新品

    近日,技术先进的CMOS图像传感器供应商思特威(SmartSens),重磅推出三款全新升级AI系列图像传感器新品——SC235AI/SC43
    发表于 10-26 17:46 607次阅读
    思特威<b class='flag-5'>AI</b>系列再添三款全性能升级<b class='flag-5'>图像</b>传感器新品

    机器视觉:图像处理技术图像增强技术

    对原始获取图像进行一系列的运算处理,称为图像处理。图像处理是机器视觉技术的方法基础,包括图像增强、边缘提取、
    发表于 10-20 10:17 372次阅读
    机器视觉:<b class='flag-5'>图像</b>处理<b class='flag-5'>技术</b>、<b class='flag-5'>图像</b>增强<b class='flag-5'>技术</b>

    【KV260视觉入门套件试用体验】Vitis-AI加速的YOLOX视频目标检测示例体验和原理解析

    示例体验 参考此前的帖子:【KV260视觉入门套件试用体验】部署DPU镜像并运行Vitis AI图像分类示例程序 - 智能硬件论坛 - 电子技术论坛 - 广受欢迎的专业电子论
    发表于 10-06 23:32

    【KV260视觉入门套件试用体验】七、VITis AI字符和文本检测(OCR&amp;Textmountain)

    视觉领域的重要问题,主要是识别和理解图像或视频中的文字信息。字符检测和识别(OCR)技术最早在1929年由德国科学家Tausheck提出,定义为将印刷体的字符从纸质文档中识别出来。随着OCR技术的日益
    发表于 09-26 16:31

    【KV260视觉入门套件试用体验】六、VITis AI车牌检测&amp;车牌识别

    视觉技术实现的自动识别车辆牌照号码的过程。该技术通过图像采集、车牌检测、字符分割和字符识别等步骤,实现对车牌号码的自动获取与识别。车牌识别技术在交通管理、安全监控、停车场管理、电子收费
    发表于 09-26 16:28

    PowerAI Vision:用于图像和视频的自动AI

    电子发烧友网站提供《PowerAI Vision:用于图像和视频的自动AI.pdf》资料免费下载
    发表于 09-13 10:43 0次下载
    PowerAI Vision:用于<b class='flag-5'>图像</b>和视频的自动<b class='flag-5'>AI</b>

    虹软图像深度恢复技术与生成式AI的创新 生成式AI助力

    当前,生成式人工智能(AI技术的快速发展令人瞩目。它能够理解人类的描述,并在短时间内生成逼真的图像和视频。在生成式AI的应用中,图像深度信
    发表于 06-21 09:06 309次阅读

    AI视觉检测在工业领域的应用

    可以随着工艺流程调整和升级。 二、工业AI视觉检测系统的工作原理 工业AI视觉检测系统的工作原理包括以下几个步骤: 1.图像采集:系统首先通过高分辨率的摄像头或彩色相机对产品进行拍摄,以获取高清晰度
    发表于 06-15 16:21

    思必驰:AI语音正逐步迈入“定制化”时代

    随着AI语音技术的不断发展,如今,定制化语音的功能来到了最复杂的AI场景——对话式AI设备。趋势的持续演变意味着,
    的头像 发表于 05-24 16:32 812次阅读