AR/VR声光触应用趋势和全栈式解决方案

艾邦在上海举办了第四届AR/VR产业链论坛。瑞声科技产品经理张弦出席了本次活动，并以《AR/VR声光触应用趋势和全栈式解决方案》为题进行了分享。

瑞声科技致力于通过不同的感知来重新定义身临其境，让虚拟和现实更加完美地融合。瑞声科技从听觉、视觉、触觉三大维度入手构建AR/VR的感知交互矩阵，这三者也是人类获取95%以上外界信息的渠道。

在视觉方面，瑞声科技的显示光学技术帮助AR/VR设备实现更轻更薄的体积，并且带来视野更宽广、画质更清晰的体验，其开发的相机模组为环境感知、自我识别、深度识别提供技术支持。

在听觉方面，瑞声科技提供了小体积、高灵敏度、高信噪比的远近场拾音技术，以及小体积、低音增强以及空间音频算法的声学技术。

在触觉方面，瑞声科技提供自适应扳机解决方案与RichTap触觉交互解决方案，能让用户感受到真实的力度和清晰的反馈。

 

本次论坛，瑞声科技张经理分别从视觉、听觉、触觉三个板块展开，介绍了对行业趋势的理解，以及瑞声科技的技术方案。

深耕下一代光学和显示技术

助力设备轻量化

VR 显示光学

虽然Pancake现在的渗透率还不足，但是Pancake可实现更轻薄的光学组件与更出色的显示性能，正成为VR的一个主流方案。

瑞声科技提供的VR显示光学系统采用Pancake方案，使VR设备能够在获得更优质图像的同时，获得更薄更轻巧的机身，能够为VR体验一键美颜+瘦身。瑞声科技针对不同微显示屏（FAST LCD、μOLED等）的技术，可提供不同的产品，形成了独特的产品矩阵。

AAC VR 显示光学系统特点：

主机更轻薄——光学镜头的总长缩短至 19 mm以内

视野更开阔——视场角最宽可达100度

更有效抑制“鬼影”——图像拖尾降至3% 以内

近视体验更友好——屈光度调节可达800度

边缘像质依然清晰——边缘视场MTF值可达0.5以上

IPD自调节方案——根据用户瞳间距实时调整，消除视觉疲劳和眩晕感

AR 显示光学

衍射光波导正在成为AR光学的成像主流，AR产品目前的形态过于笨重，最终仍需要往更轻、更薄、更透、更小、更趋于普通眼镜的制造模式去努力。

为了实现普通眼镜的轻薄外观，瑞声科技联合Dispelix打造了新一代单层彩色光波导镜片。

对比传统的光波导方案， 瑞声科技的单层光波导镜片方案有以下优点：

更友好的通透性——透过率从80%至90%

更具潜力的工艺空间——避免复杂堆叠工艺，极大提升产品良率

更极致的镜片——单层光波导技术厚度与重量降至1/2

更友好的ID设计——角入射的设计

更出色的画面呈现——通过沉积高折射率材料，折射率可达2.4以上

在AR方向上，瑞声科技跟Dispelix、Raysolve、TriLite等厂商形成AR技术生态协同。瑞声科技通过开发搭建光波导以及AR光学模组生产线，能够进行相关产品的制造和组装生产，同时能够协助客户开发产品，为客户定制化地提供加工测试的解决方案。

 

AR/VR 相机模组

随着VR设备日益重视外界感知，摄像头模组的需求会越来越多。在相机模组板块，瑞声科技的光学垂直布局整合技术生态，提供高性价比、差异化、高端协同和稳健交付四大方面的服务。

瑞声科技的相机模组搭配其独家的WLG技术，镜头上采取1G5P或1G6P多片式的方案，减少焦距漂移的同时增大光通量，增强低光性能，将噪点降至最低。

目前，瑞声科技在镜头产能上每年能产出18亿只，模组出货总量上每年能达到1.5亿只，模组单月最高出货量也能达到20KK。

 

调出声音之美与空间感

持续为声学体验创造差异化价值

AR/VR 音频系统

对于AR设备来说，大家追求ID轻薄、声学的私密性以及一定的立体声效。而对于VR设备来说，核心需求则在于打造空间声场提升沉浸感，让声场饱满性能更好、私密性更强以及体积更加小巧。

根据产品的应用趋势，瑞声科技声学系统从用户体验的三大核心需求“声临其境”、“HIFI音质”以及“隐私保护“出发，提供全面的解决方案。

瑞声科技针对“声临其境”的头戴设备音频体验研发了空间音频算法，在保证原本音乐特性的同时扩大声场范围，将常见的水平方向立体声变成更具空间感的沉浸式立体音频，产生被音乐环绕包围的真实感与空间感。算法还可提供360°头部追踪，通过追踪到佩戴者头部的位置，声场会根据头部运动而产生相应变化，带来身临其境的现场感。

在“HIFI音效”方面，瑞声科技提供大师级的同轴喇叭，它在高频部分有优异的性能，再辅以瑞声科技独有的NLC低频失真算法和自有的ANS降噪算法，提升低频增强效果和清晰度，以获得更佳音质。

此外，在“隐私声场技术”方面，瑞声科技提供超线性扬声器，实现几乎与普通眼镜外观无差异的ID设计。此外，瑞声科技通过泄声孔和主发声孔的特别设计优化，提升隔离度，有效减少漏音。

 

总体来说，得益于过往30年在消费电子声学领域的深厚技术积累，瑞声科技可为AR/VR提供一站式声学解决方案，包括扬声器、独家音频算法和专业调试服务的三大方向，满足客户不同类型的音频需求。

AR/VR 拾音方案

除音频系统外，声学体验的另一大要素是拾音方案。实际上，AR和VR对于拾取人声有不同的要求，AR更倾向于定向拾音，而定向拾音对VR来讲只是场景之一。

瑞声科技提供AR/VR麦克风器件与整体解决方案的灵活组合，以小尺寸、高性能、低功耗麦克风产品阵列，结合算法实现精准定向拾音，提升降噪表现。

在轻便的AR设备中，多麦克风阵列首要面临的是空间和性能的双重挑战，对此，瑞声科技带来小尺寸、高性能的数字麦克风及模拟麦克风，可完全满足AR设备在语音品质、整机堆叠方面的极高要求。

目前，瑞声科技还提供一体化智能麦克风，集成高性能麦克风与音频处理芯片为同一封装，支持离线语音唤醒功能，并具备低功耗、低延迟的性能，主要应用在穿戴设备领域。

 

当前，消费类设备需要采用多个全向麦克风的阵列，但全向麦克风很难将需要的语音与不需要的背景噪声隔离开，且需要更大的空间、能耗以及设计的复杂性。

瑞声科技提供一款指向性麦克风，采用8字型定向拾音模式，且具备在不同频率下出色的指向一致性，在硬件层面上消除更多不必要的噪声，高保真留存用户声音。

在系统层面来讲，该麦克风能极大的减少算力，同时减少整体功耗。该麦克风可应用于对语音指向性要求较高的应用场景，如语音翻译、语音转文字等。

打造沉浸式体验

振感与震撼同在

AR/VR产品的触觉反馈应用越来越广泛，从手柄控制器、体感控制器、以及IP道具的触感应用，到手柄自适应扳机上的步进马达。触感正在为AR/VR带来不只是过眼瘾的升级体验，而其技术趋势也从多重触感到多通道触感，再到多模态触感演化。

游戏是VR设备的主要应用领域之一，而手柄是VR的主要交互工具，宽频马达带来的振感和自适应扳机带来的力反馈将会是游戏体验提升的一个方向。

RichTap是瑞声科技旗下全品类设备触感（Haptics）整体解决方案，融合硬件、软件、算法和触感设计，提供一体化的高质量触觉体验，同时支持跨平台应用。在AR/VR领域，它配备了动态交互控制、左右手柄宽频异振、集成调试实时预览、自适应力扳机与振动联动控制、多通道控制等先进技术。

瑞声科技基于三大感知技术领域来做布局。除了光学、声学、触觉交互以外，瑞声科技还能够提供一站式的FATP服务以构建AR/VR的整体解决方案。

审核编辑：黄飞