0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

打造沉浸式体验,AR/VR设备需要怎样的声学系统

Monika观察 来源:电子发烧友 作者:莫婷婷 2023-01-16 00:00 次阅读
电子发烧友网报道(文/莫婷婷)随着硬件迭代、性能提升,以及市场需求的增长,AR/VR市场获得了更高的关注度,包括主控芯片、显示系统、声学系统在内的产业链各个环节都在推出相应的新品。其中,声学元器件是AR/VR设备中的重要元器件。
以VR设备为例,在基本结构中,成本占比前三的元器件分别是显示屏幕、存储、芯片处理器,占比依次是34%、27%、16%,光学模组和声学模组分别占据6%的成本。在声学模组方面,为AR/VR设备提供声学器件的厂商有楼氏电子、歌尔股份、瑞声科技等,另外,共达电声也在投资者互动平台表示公司已有麦克风、喇叭等产品可应用于VR领域。
视觉之外,听觉是AR/VR感知体验的另一个重要感知。那么,AR/VR到底需要怎么样的音频系统,麦克风等声学器件与降噪算法等音频技术之间可以怎么配合?
由于AR与VR应用场景、产品形态都有较大的不同,因此将两者分开来看。瑞声科技系统架构高级总监李建国提到,AR产品需要的是ID友好、轻薄,非入耳式佩戴,但是又要有私密性,音频体验要求有立体声效、响度适中。VR产品对音频系统的需求主要有四点,一是空间声场,沉浸感要强,二是声场饱满,性能优越;三是无声泄露,私密性好;四是小巧便捷,穿戴方便。
识音方案是提升AR/VR设备听觉体验的另一要素。在这方面,MEMS麦克风支撑语音交互功能的核心器件,为AR/VR设备提供定向人声拾取、低功耗语音的识别等功能。对于全向麦克风来说,麦克风阵列加语音算法是实现定向拾音的关键。但空间与性能之间的平衡是多麦克风阵列要实现轻便AI 设计的双重挑战。
为此,瑞声科技推出了小尺寸数字麦克风以及模拟麦克风。其中,数字麦克风的尺寸为2. 75* 1. 85*0.9mm,信噪比可以高达66dB,模拟麦克风的信噪比达到了67. 5 dB。“在这么小尺寸的产品封装空间内,要达到这么高的信噪比是具备挑战的。但是我们的小尺寸麦克风可以完全满足 AR 设备对语音品质以及整机堆叠对空间的极致要求。”李建国表示。
值得一提的是,瑞声科技还推出指向性麦克风和智能麦克风。迄今为止,消费类设备不得不采用多个全向麦克风阵列,并且这些麦克风很难将需要的语音与不需要的背景噪声隔离,采用麦克风阵列代价需要更大的空间能耗以及设计的复杂性。基于上述难点,瑞声科技推出的指向性麦克风,采用了 8 字形的拾音模式,相较于全向麦克风,可以在硬件层面消除更多不必要的噪声,高保真的隔离用户声音。指向性麦克风的推出让麦克风可应用于语音翻译、听障人士语音转换文字等语音指向性要求更高的场景。目前,亮亮视野等多家硬件厂商推出的AR眼镜明确可以面向听障人士。
据了解,瑞声科技从声临其境、HiFi音质以及隐私保护三大方面打造AR/VR声学系统。其中针对身临其境的头戴设备音频体验,瑞声科技研发了空间音频算法,在保证原本音频特性的同时,扩大了声场的范围,将常见立体声更变成具有空间感、沉浸式的立体音频;该算法提供低延时360°头部追踪,通过追踪佩戴者的头部位置声场,作出相应的变化。
为了达到HiFi音质,瑞声科技的大师级同轴1216扬声器,配合自研的 NLC算法等算法增强技术提升音效。此外,瑞声科技还通过隐私声场技术减少漏音。李建国表示,为了提升音频体验的私密性和沉浸体验,瑞声科技推出了超微型扬声器,尺寸仅为8*20*3mm,可以把 AR眼镜的镜腿做到宽11mm,厚度 8mm米,接近普通眼镜,这将助推AR/VR设备的小型化发展趋势。
尽管当下AR/VR市场的增速没有预期的快,并且出现下滑,但IDC预计到2026年中国AR/VR市场规模将超130亿美元,整体市场趋势向好。如今,AR/VR产业正处于市场增长的关键期,就在近期,业内流出苹果AR/VR设备的新设计和功能等细节展示,预期在苹果推出AR/VR设备后,能将加速整体市场的发展。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • Ar
    Ar
    +关注

    关注

    24

    文章

    4964

    浏览量

    167379
  • 声学
    +关注

    关注

    1

    文章

    46

    浏览量

    13606
  • vr
    vr
    +关注

    关注

    34

    文章

    9556

    浏览量

    148814
  • XR
    XR
    +关注

    关注

    0

    文章

    354

    浏览量

    8890
收藏 人收藏

    评论

    相关推荐

    鸿蒙应用/元服务开发-窗口(Stage模型)体验窗口沉浸能力

    一、体验窗口沉浸能力说明 在看视频、玩游戏等场景下,用户往往希望隐藏状态栏、导航栏等不必要的系统窗口,从而获得更佳的沉浸体验。此时可以借
    发表于 02-06 15:08

    arvr的区别与联系 arvr哪个更高级

    存在着明显的差异。本文将对ARVR的区别和联系介绍。 首先,我们需要了解ARVR的定义和基本原理。A
    的头像 发表于 01-19 10:48 3999次阅读

    中兴通讯发布5G VR大空间沉浸剧场解决方案

    中兴通讯发布5G VR大空间沉浸剧场解决方案 在第二十五届中国国际高新技术成果交易会期间,中兴通讯正式发布了5G VR大空间沉浸剧场解决方案。 此次中兴通讯发布的5G
    的头像 发表于 11-28 18:32 1577次阅读

    不只是游戏!AR/VR正在改变工业制造

    AR/VR的应用 当AR/VR技术出现的时候,人们自然地将其和游戏挂了钩。通过对于虚拟世界的打造和与现实物理世界的融合,
    的头像 发表于 10-18 16:25 526次阅读
    不只是游戏!<b class='flag-5'>AR</b>/<b class='flag-5'>VR</b>正在改变工业制造

    如何实现真正的沉浸VRAR

    是,它们距离人们的确越来越近了。然而,要想让ARVR真正身临其境,人们所有的感官都必须确信这种体验是真实的。 创造可信的VRAR体验,取决于工程师如何准确、一致地再现所有构成人们感
    的头像 发表于 10-10 13:36 282次阅读
    如何实现真正的<b class='flag-5'>沉浸</b>式<b class='flag-5'>VR</b>和<b class='flag-5'>AR</b>?

    高通推出下一代XR和AR平台,支持打造沉浸式体验和更轻薄的设备

    强大终端侧AI,将赋能更加复杂、沉浸式和个性化的体验。 •  高通仍是行业领先的XR企业空间计算平台的首选。 今日, 高通技术公司宣布推出两款全新空间计算平台——第二代骁龙XR2和第一代骁龙AR1,将支持打造下一代领先MR、
    的头像 发表于 09-28 07:10 347次阅读
    高通推出下一代XR和<b class='flag-5'>AR</b>平台,支持<b class='flag-5'>打造</b><b class='flag-5'>沉浸</b>式体验和更轻薄的<b class='flag-5'>设备</b>

    XREAL Air 2系列搭载瑞声科技整体声学解决方案

    在声音方面,XREAL与瑞声科技合作,为XREAL Air 2系列配备了AR行业首个软硬件综合声学解决方案:两颗AR专用超线性扬声器、定制音腔设计、近场声学算法和金耳朵团队专业调音,助
    的头像 发表于 09-07 14:15 1600次阅读
    XREAL Air 2系列搭载瑞声科技整体<b class='flag-5'>声学</b>解决方案

    LPVR-CAD:基于位置的AR/VR跟踪解决方案,用于沉浸式3D可视化

    广州阿路比电子科技公司提供名为LPVR-CAD的软件中间层,适用于大空间VR/AR运动捕捉方案,满足100平米以上跟踪范围需求,可同时捕捉多个头盔位置和姿态信息。该系统结合多个光学系统
    的头像 发表于 08-17 17:25 368次阅读

    NVIDIA Turing推动VR迈向完全沉浸式体验

    NVIDIA Turing 推动 VR 迈向完全沉浸式体验
    的头像 发表于 08-01 15:05 382次阅读

    【有奖直播】Molex莫仕AR/VR 产品方案及应用分享

    · 直播中不定时抽奖 作为元宇宙的关键入口,AR/VR赢来新机遇。新的 ARVR 解决方案面临不少新挑战,设备外型必须小极巧轻便,佩
    的头像 发表于 06-21 13:05 259次阅读
    【有奖直播】Molex莫仕<b class='flag-5'>AR</b>/<b class='flag-5'>VR</b> 产品方案及应用分享

    arvr的区别和用途

    AR将虚拟信息叠加到真实世界中,通过增强现实技术为用户提供交互性的增强体验;而VR则是创造一个完全虚拟的数字世界,让用户通过沉浸式的体验感觉好像真的置身其中。
    发表于 06-20 16:50 2280次阅读

    VR/AR/MR设备敲响元宇宙大门,这些关键技术值得关注!

    边缘设备是物理世界和数字世界之间的“守门人”,VR/AR/MR等设备便是典型的边缘设备,让用户不仅限于2D浏览,还能为生活中各种场景带来提供
    的头像 发表于 06-08 07:45 660次阅读

    成像设计趋势:为什么 AR/VR 需要颠覆性的智能成像系统

    在这篇博文中,我将重点介绍AR/VR如何推动成像设计的创新。 任何认为数字孪生只包括机械、热或电气组件的人都不需要AR/VR
    的头像 发表于 05-24 15:48 1302次阅读

    独创融合视觉技术,锐思智芯打造AR/VR全新视觉传感器

      电子发烧友网报道(文/莫婷婷)为了实现更加丰富和沉浸式的体验,眼动追踪功能、手势识别功能逐渐成为AR/VR设备的标配功能之一,上述技术的成熟是各大厂商攻克的方向。而视觉传感器正是在
    的头像 发表于 05-16 00:22 4043次阅读
    独创融合视觉技术,锐思智芯<b class='flag-5'>打造</b><b class='flag-5'>AR</b>/<b class='flag-5'>VR</b>全新视觉传感器

    高铁设备检修VR实训系统的优势

    高铁设备的检修是一个重要的环节,需要专业的知识和技能。为了提高学生的实践能力,VR(虚拟现实)技术被引入到高铁设备检修实训中,开发了高铁设备
    的头像 发表于 05-05 14:42 445次阅读