仿真软件专家rFpro与索尼合作开发高保真传感器模型

据外媒报道，仿真软件专家rFpro宣布与索尼半导体解决方案集团（Sony Semiconductor Solutions Corporation）合作开发集成到rFpro软件中的高保真传感器模型。此次合作将侧重于提高仿真解决方案的保真度，以显著减少在传感器开发周期中收集物理数据的需求。

此次合作将使ADAS和自动驾驶汽车的感知系统能够在虚拟环境中开发、训练和测试，从而助力加速开发。

rFpro运营总监Matt Daley表示：“在我们最近推出的光线追踪技术和rFpro的多重曝光摄像头技术的开发过程中，索尼半导体一直是我们重要的合作伙伴。且通过与索尼密切合作并将其传感器模型集成到我们的技术中，我们已经能够在仿真中实现高水平的相关性。因此，我们将共同帮助该行业减少对收集真实世界数据的依赖，降低成本和耗时。”

索尼半导体解决方案公司汽车业务部副高级总经理Kenji Onishi表示：“rFpro和索尼半导体解决方案之间的合作将为ADAS感知系统开发人员提供车规级End2End仿真管道。根据摄像头系统中使用的图像传感器的内部架构，索尼已经准备了一个传感器模型，以实现车规级保真度。”

使用深度神经网络开发的感知软件和汽车图像传感器都是该管道的组成部分，并且变得更加复杂以满足对更高ADAS功能和稳健性的需求，但这也给开发和验证带来了巨大压力。车规级仿真是一种生成合成数据的工具，可作为上述问题的解决方案。

信号处理、LED闪烁缓解、光谱效应和图像传感器控制（例如运动模糊和滚动快门）是索尼传感器模型实现的复制现象的一些示例。索尼在传感器模型和渲染系统之间的接口非常高效，可以快速运行高保真仿真。该接口在索尼的所有汽车图像传感器中也是通用的，使用户能够在新一代传感器模型上市时快速过渡。

仿真使车辆系统能够经受各种场景。天气、时间、交通量和行人都可以独立自动地控制和变化。rFpro已将场景中的所有内容都使用准确的材料特性进行物理建模，并且重新创建的路面高度精度在1毫米以内。

Daley补充说：“在仿真中，车辆每天可以行驶数千英里的高价值、高活动虚拟里程，且可以识别边缘情况并快速生成新的迭代以彻底运行传感器系统。仿真使得测试无需现实世界中等待曝光的需要。在现实世界中，大部分行驶里程都相对平静。”

索尼是第一家与rFpro合作开发其光线追踪技术的合作伙伴。该技术使用多条光线准确捕捉现实世界的所有细微差别。作为一种多路径技术，它可以可靠地仿真摄像头周围发生的大量反射。这对于低光场景或有多个光源以准确描绘反射和阴影的环境至关重要。

rFpro的光线追踪应用于仿真场景中的每个元素，这些元素已经过物理建模以包含准确的材料属性，以创建最高保真度的图像。由于这对计算要求很高，因此该技术可以实时解耦，且可以调整帧渲染速率以适应所需的细节级别。

汽车行业使用的现代HDR（高动态范围）摄像头捕捉不同时间长度的多次曝光。例如每帧短、中、长曝光。为了准确地仿真这一点，rFpro引入了多重曝光摄像头API，并与传感器制造商的传感器模型集成在一起，从而使传感器模型能够以与物理对应物完全相同的曝光时间对虚拟世界进行采样。

Daley总结道：“通过rFpro渲染和索尼的传感器模型管道，运动模糊、卷帘快门特性、滤色器特性和物理传感器的信号处理都存在于仿真图像中。新模型还允许在传感器模型上复制图像传感器中的LED闪烁缓解功能，并在仿真中充分发挥作用。此外，该传感器模型能够与在rFpro的高保真资产和渲染系统上仿真的快速闪烁的LED光源进行交互，例如交通灯和车辆刹车灯。准确地复制这些现象对于实现与现实世界的高度关联至关重要。”

审核编辑黄宇