0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

自适应高动态范围流媒体

李丹 来源:Gordon Lau 作者:Gordon Lau 2022-12-29 10:02 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

高动态范围 (HDR) 及其如此有吸引力的原因

在观看工作或娱乐视频流时,我们都期待高质量。使用 IP 网络传输媒体(称为 AV-over-IP)有助于消除对内容、设备和带宽的需求。在大多数用例中,预计压缩视频的交付具有更高的细节、更大的对比度和逼真的色彩。超高清 (UHD) 视频结合了分辨率的改进、宽色域 (WCG)、更高的帧速率、更高的位深度和高动态范围 (HDR),以提供更逼真的视觉体验。

HDR 是视频生态系统的一项相对较新的功能,它专注于增加黑白之间的对比度,从而产生细节丰富的阴影和更明亮的反射。但 HDR 的整体视觉效果更加引人注目,因为图片看起来更丰富、更逼真,并且改进的对比度可提供更清晰、更详细的图像。与分辨率的提高相比,观看者通常会感觉到 HDR 带来的视觉冲击更大。毫不奇怪,在体验了视觉优势之后,内容开发者和观众在分发或消费内容时都希望获得同样的功能。考虑到传输带宽或存储是整个链条的限制因素,HDR 可以提供显着的视觉效果,同时仅消耗略多的带宽或存储。

HDR 如何提供改进的细节和图像质量

图 1显示了高级 HDR 系统的概念。在 HDR 过程的开始,使用光电传递函数 (OETF) 将捕获的场景光转换为电子表示。传感器和相机捕获大量场景光,通常在后期制作中进行管理,进一步处理可以优化颜色和光线水平。该电子表示被分配到一个或多个显示器,在那里它使用电光传递函数 (EOFT) 转换回场景光。最初为 CRT(阴极射线管)设计的 EOFT 称为伽马。

poYBAGOs9J-AHO3OAAAgilN7v58226.jpg

图 1:图像提供了 HDR 场景捕获、传输和显示过程的高级说明。(来源:AMD 赛灵思

我们现在正处于过渡期,大多数信号源和显示器继续支持标准动态范围 (SDR) 和原始伽马 EOFT,而市场则采用 HDR。

混合对数伽马 (HLG) EOTF 的开发是为了向后兼容现有的大多数 SDR 显示器,混合伽马曲线可以利用较新显示器的更高亮度功能,而无需额外元数据的复杂性,从而在 SDR 和 HDR 上生成图像显示。

还有其他基于感知量化器 (PQ) EOTF 的 HDR 格式,这是一种基于人类感知的非线性传递函数,旨在根据眼睛的光敏感度提供更具代表性的比特。这些基于 PQ 的格式需要SMPTE-2086定义的元数据,该元数据标准化了原始母带显示的原色和亮度范围等参数——可能让所有观众拥有相同的体验。每种格式都提供 HDR 内容,并在内容保真度、工作流影响、元数据要求和使用费义务方面进行权衡,这些在部署 HDR 系统和工作流时需要考虑。

使用 AMD Xilinx 平台流式传输 HDR 内容

流媒体使高质量的媒体分发和消费几乎可以在任何地方进行,从而导致需求增加。流媒体增加了另一层复杂性,因为带宽是物理限制和额外成本。对于流媒体内容,HDR 增加了可感知的细节和分辨率影响,对带宽的影响可以忽略不计,即使某些格式需要额外的元数据也是如此。

Zynq ® UltraScale+ ™ MPSoC提供低功耗、单芯片解决方案,结合了全功能多核 Arm ®处理子系统和嵌入式实时 4kp60 4:2:2 10 位视频编解码器单元 (VCU)同步 H.264/H.265 编码/解码。基于常见的行业工具和框架,如 Linux、V4L2 和 GStreamer,AMD Xilinx 使客户能够评估功能并开发带有驱动程序和应用程序堆栈的定制解决方案。Zynq UltraScale+ MPSoC 足够灵活,可以作为支持现有 HDR 格式(例如 HLG 和 HDR10)的单芯片捕获/编码或解码/显示设备。

对于不需要元数据的 HLG EOTF HDR 格式,从 SDIHDMI 等物理连接中提取适当的色度信息,并将数据保存在 ITU 为 H 定义的标准化视频可用性信息 (VUI) 字段内的编码比特流中.264 或 H.265 比特流。对于 PQ EOTF HDR 格式,SMPTE-2086 定义的关键参数是从物理连接中捕获的,例如原色和与母版显示相关的元素,例如显示色量 (MDCV) 和内容亮度 (CLL)。这些存储在压缩比特流的标准化 VUI 和补充增强信息 (SEI) 字段中的适当字段中,以便可以为系统的显示元素分发、解码和提取数据(图 2). AMD Xilinx 支持通过开放的标准化机制传输任何所需的 HDR 元数据,从而为未来的 HDR 格式提供适当的互操作性和灵活性。

pYYBAGOs9KKAYSBxAABzpPZcAkk733.jpg

图 2:AMD Xilinx 多媒体堆栈中 PQ HDR 元数据的概念流程。(来源:AMD 赛灵思)

面向未来的 HDR 流媒体入门

AMD Xilinx 创建了目标参考设计 (TRD),它提供了所有必需的源和项目文件,以使用 SDI 和 HDMI 等行业标准接口重新创建以高达 4kp60 运行的系统,因此您可以评估系统并快速转向定制. 有两种 TRD 变体显示了在ZCU106 评估套件上实现的HLG 和 PQ 类型 HDR 格式(表 1)的示例。

表1:AMD Xilinx 的ZCU106 评估套件实现了两个 TRD 变体,以显示 HLG 和 PQ 类型 HDR 格式的示例。(来源:AMD 赛灵思)

设计模块 描述
PL DDR HLG SDI 音频视频采集和显示 HLG/非 HLG 视频 + 2/8 通道音频采集和显示,通过 SDI 和来自 PS DDR 的 VCU 编码和来自 PL DDR 的解码
PL DDR HDR10 HDMI 视频采集和显示 HDMI 设计展示了使用 PS DDR 进行编码和使用 PL DDR 进行解码。支持 HDMI 的 HDR10 静态元数据,以及 DCI4K。

Zynq UltraScale+ MPSoC 的适应性强的硬件和软件架构使多媒体系统开发人员能够随着生态系统的发展实施新的 HDR 格式,因此他们始终为未来做好准备!

Gordon Lau 撰写了Adaptable High Dynamic Range Streaming博客,经许可在此重新调整用途。

作者

pYYBAGOs9KaAcSFlAAAKaGaEJ7E084.jpgGordon Lau 是位于加拿大安大略省多伦多市的 AMD 自适应和嵌入式计算组 (AECG) 的视频系统架构师。他拥有瑞尔森理工大学的电气工程学位,在电子和可编程 FPGA 领域拥有 20 多年的职业生涯,专注于视频接口、编解码器和广播工作流程。

审核编辑黄昊宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 流媒体
    +关注

    关注

    1

    文章

    200

    浏览量

    17237
  • HDR
    HDR
    +关注

    关注

    4

    文章

    291

    浏览量

    33332
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    无人机动态环境自适应避障系统平台的应用与未来发展

        无人机动态环境自适应避障系统平台的应用与未来发展    北京华盛恒辉无人机动态环境自适应避障系统是一种融合多传感器感知、智能决策与实时路径规划的先进自主飞行技术,旨在保障无人机
    的头像 发表于 01-08 15:35 286次阅读

    配电房自适应滤波声纹传感器:智能监测的新维度

    文章由山东华科信息技术有限公司提供在配电房的日常运维中,设备运行声音的细微变化往往蕴含着潜在故障的早期信号。自适应滤波声纹传感器作为新一代智能监测设备,通过动态捕捉与分析设备声纹特征,为电力系统
    的头像 发表于 11-18 09:17 534次阅读
    配电房<b class='flag-5'>自适应</b>滤波声纹传感器:智能监测的新维度

    在HarmonyOS中使用AVPlayer播放流媒体

    在 HarmonyOS 中,使用 AVPlayer 播放流媒体,不是“能播就行”,而是要“稳、准、快、可控”。
    的头像 发表于 10-15 11:45 2128次阅读
    在HarmonyOS中使用AVPlayer播放<b class='flag-5'>流媒体</b>

    五大电磁干扰自适应抑制系统软件:动态智能应对复杂电磁环境核心方案

    五大电磁干扰自适应抑制系统软件:动态智能应对复杂电磁环境核心方案
    的头像 发表于 09-17 16:39 1049次阅读
    五大电磁干扰<b class='flag-5'>自适应</b>抑制系统软件:<b class='flag-5'>动态</b>智能应对复杂电磁环境核心方案

    电磁干扰自适应抑制系统:动态智能应对复杂电磁环境核心方案

    五大电磁干扰自适应抑制系统:动态智能应对复杂电磁环境核心方案
    的头像 发表于 09-17 16:38 575次阅读
    电磁干扰<b class='flag-5'>自适应</b>抑制系统:<b class='flag-5'>动态</b>智能应对复杂电磁环境核心方案

    电磁干扰自适应抑制系统平台全面解析

    电磁干扰自适应抑制系统平台全面解析
    的头像 发表于 09-17 16:12 844次阅读
    电磁干扰<b class='flag-5'>自适应</b>抑制系统平台全面解析

    电磁干扰自适应抑制系统平台全面解析

    电磁干扰自适应抑制系统平台精简解析 北京华盛恒辉电磁干扰自适应抑制系统平台,是针对复杂电磁环境下电子设备稳定运行需求设计的综合性解决方案,通过整合多元技术实现动态、智能的干扰抑制。以下从系统架构
    的头像 发表于 09-17 16:11 630次阅读

    基于模糊自适应PID控制的永磁同步电机伺服系统研究

    控制策略,针对永礁同步电机的对象特点,设计PD参数的不同隶属度画数。与常規PD仿真对比显示,该模糊自适应PID控制响应速度快,稳态精度,抗抚动性能大大加强。 纯分享帖,点击下方附件免费获取完整
    发表于 07-29 16:16

    基于FPGA LMS算法的自适应滤波器设计

    自适应滤波是近几十年发展起来的信号处理理论的的新分支。随着人们在该领域研究的不断深入,自适应处理的理论和技术日趋完善,其应用领域也越来越广泛。自适应滤波在通信、控制、语言分析和综合、地震信号处理
    的头像 发表于 07-10 11:25 3646次阅读
    基于FPGA LMS算法的<b class='flag-5'>自适应</b>滤波器设计

    无刷直流电机自适应模糊直接转矩控制研究

    针对无刷直流电机( BLDCM)转矩脉动较大和传统 P1速度环调节能力差的问题,提出了自适应模糊直接转矩控制的策略。集成了转矩直接控制和模糊控制自适应强的优点,可以有效抑制转矩脉动和加快转矩响应速度
    发表于 07-09 14:20

    无刷直流电机自适应模糊PID控制系统

    控制系统的计算机仿真数学模型。设计了系统速度环的模糊PID控制器,仿真结果表明。与传统PID控制相比,自适应PD控制的BLICM系统具有更高的称定性和控制精度、更快的动态响应速度。 纯分享帖,点击下方
    发表于 07-09 14:18

    CYW43907使用AP功能时是否具有自适应功能?

    我们想在我们的产品中使用这种芯片来获得 CE 注册证书,CE 需要自适应功能,但是我们在数据表和源包中找不到任何消息。functions 要执行如下: 启动时自动扫描并选择干扰较小的频道,遇到干扰
    发表于 07-09 08:21

    无模型自适应控制在永磁同步电机转速中的仿真研究

    摘要:针对永磁同步电机非线性、时变不确定性及难以建立精确的数学模型等问题,不同于动态线性时变模型替代一般非线性系统,提出一种基于模糊过程和系统输出误差的无模型控制器。基于反馈线性化通过自适应模糊推理
    发表于 06-25 13:01

    LLSM流媒体传输模块 动态图像带宽稳定技术突破

    高清实时视频的能力。一旦控制系统设定带宽上限为500K,那么在多种场景下,尤其是动态图像环境下,带宽的波动始终会控制在这个范围内。我们在同一场景的不同情况下(正
    的头像 发表于 05-27 17:58 1270次阅读
    LLSM<b class='flag-5'>流媒体</b>传输模块  <b class='flag-5'>高</b><b class='flag-5'>动态</b>图像带宽稳定技术突破

    LLSM——基于RK3588的低延迟低带宽流媒体传输模块

    随着物联网和人工智能的快速发展,实时视频传输在嵌入式系统中变得越来越重要。无论是智能摄像头、无人机还是工业监控设备,都需要高效、低延迟的流媒体传输解决方案。慧视推出的LLSM低延迟低带宽流媒体传输
    的头像 发表于 04-30 18:36 2326次阅读
    LLSM——基于RK3588的低延迟低带宽<b class='flag-5'>流媒体</b>传输模块