0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

HTC Vive推出了3DSP音频SDK,可以为应用程序提供具备空间音效的音频

0wvm_ARchan_TT 来源:未知 作者:李倩 2018-06-28 16:45 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

听觉是VR体验中不可或缺的一部分,真正沉浸式的体验除了视觉外也要让听觉符合场景的设定。为了帮助开发者更方便的创造自然的立体音效,HTC Vive推出了3DSP音频SDK。

3DSP是一款音频SDK,可以为应用程序提供具备空间音效的音频。影响人类对于音频空间化感知的因素有很多,比如声音传入两只耳朵的时间差,两耳之间的水平差异,人体耳廓、头部等部位的差异、环境因素(例如房间声音反射和混响)以及从声源发出声音到人耳接收到声音之间遇到的障碍物阻挡,都会影响人的听感。

为了让用户在VR中听到的声音尽可能的真实,就需要考虑到声音发出到被听到之间的种种因素,让VR中的声音尽可能接近真实空间中人们听到的声音,以增加从沉浸感。

高阶Ambisonics(高保真立体声)

传统的双声道立体声利用两个扬声器,通过人的双耳效应使声音达到空间立体的效果。

而随着技术的不断进步,在VR中我们常用一种音频技术Ambisonics,相当于让声源遍布球状的内表面,环绕用户的头部。

Ambisonics使用“球谐函数”描述声场,使声音从四面八方传来,带来更好的沉浸感。

不过迄今为止简易的基本型Ambisonic系统只能在一个中心位置创建一个精确的声场。随着听众远离中心并随着频率的增加,误差水平逐渐增加。

为了减少误差,可以采用增加球面的阶数来描述更加复杂的谐波。

HTC在对3DSP SDK的展示中便展示了3阶Ambisonics模型。

房间音频

当用户处在虚拟房间中时,就要考虑房间的复杂情况,对声音做出相应处理。

3DSP从早期反射、后期混响、背景噪声、环境材料等方面模拟房间音频,让用户获得更具空间感的声音。值得一提的是,3DSP同时保证了该技术在低计算量的情况下运行,减少设备的计算负担。

距离模型

空间中真实传播的声音会随着传播距离的增长而发生衰减,但是在不同的情况下衰减的变化是不同的。

在HTC Vive 3DSP SDK中,提供了几种情况下声音的衰减模型,采用基于现实建模的距离模型。

阻塞效应

当声音从声源发出遇到障碍物再被用户听到的时候,会因为障碍物的阻挡而发生改变。

分析物体的几何特点来计算遮挡物对声音的遮挡能力。

为了计算障碍物的遮挡能力,是通过在空间中投射大量射线,并列举有多少被障碍物遮挡。

无需使用Unity对撞机,根据不同障碍物的具体面积以及形状计算得到声源经过障碍物后被听众听到的实际情况。

其他特性

除了上述的几点外,HTC Vive 3DSP SDK还具备以下特性

·基于对真实世界精确建模(包括水平和垂直方向)的头相关变换函数(HRTF),可以得到适用于所有声音的滤波器进而还原空间音频。

·原声和回放均采用高分辨率音频。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 音频
    +关注

    关注

    31

    文章

    3227

    浏览量

    86323
  • SDK
    SDK
    +关注

    关注

    3

    文章

    1111

    浏览量

    52015
  • vr
    vr
    +关注

    关注

    34

    文章

    9694

    浏览量

    157532

原文标题:HTC Vive发布空间音频SDK,带来身临其境的听感

文章出处:【微信号:ARchan_TT,微信公众号:AR酱】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    ADAU1861音频编解码器:高性能音频处理的理想选择

    数字信号处理器(DSP)的编解码器,在音频处理方面展现出了卓越的性能。本文将深入探讨ADAU1861的特性、规格、工作原理以及应用场景,为电子工程师们提供全面的参考。 文件下载: AD
    的头像 发表于 03-23 16:15 156次阅读

    ADAU1401A音频处理器:高性能音频解决方案的首选

    提供了丰富的特性和广泛的应用可能性。今天,我们就来深入了解一下这款处理器。 文件下载: ADAU1401A.pdf 一、产品概述 ADAU1401A是一款集成了28/56位音频DSP、ADC、DAC以及类似微控制器控制接口的单芯
    的头像 发表于 03-23 15:25 210次阅读

    Cadence推出专为新一代语音AI与音频应用打造的 Tensilica HiFi iQ DSP

    第六代 HiFi DSP 为基于语音的 AI 应用和最新沉浸式音频格式带来更出色的性能与能效表现 1 中国上海,2026 年 3 月 19 日 —— 楷登电子(美国 Cadence 公司
    的头像 发表于 03-19 10:24 2.5w次阅读

    WT2605C-24SS语音芯片如何实现五种变音效果?为音频应用带来哪些创意可能?

    在当今音频技术快速发展的时代,录音芯片作为声音处理的核心元件,其功能创新不断推动着音频应用的边界。作为专业的语音芯片厂家,唯创电子推出的WT2605C-24SS高品质录变音IC,凭借其独特的五种变
    的头像 发表于 02-26 09:34 611次阅读
    WT2605C-24SS语音芯片如何实现五种变<b class='flag-5'>音效</b>果?为<b class='flag-5'>音频</b>应用带来哪些创意可能?

    高性能、高保真-多通道DSP音频功放IC功率驱动器-NTP8230G

    多通道DSP功放IC具备多通道输出,适用于不同音响系统需求,轻松搭建高品质多声道音响系统。在音响系统中音频功放能够将电信号转换为音频信号,提供
    的头像 发表于 02-10 10:27 420次阅读
    高性能、高保真-多通道<b class='flag-5'>DSP</b><b class='flag-5'>音频</b>功放IC功率驱动器-NTP8230G

    具有回声、混音、3D环绕以及虚拟低音等音频算法的DSP音频芯片-DU562

    DU562是一款由高性能32位DSP核光纤接口音频处理芯片,该芯片支持多种数字音频接口,集成多种音效算法,采用LQFP48封装;可对音乐播放及人声进行实时
    的头像 发表于 01-05 09:24 643次阅读
    具有回声、混音、<b class='flag-5'>3</b>D环绕以及虚拟低音等<b class='flag-5'>音频</b>算法的<b class='flag-5'>DSP</b><b class='flag-5'>音频</b>芯片-DU562

    新唐科技推出纯数字端口DSP(NPCA112D)内置音效增强算法

    新唐科技推出纯数字端口 DSP 音频 DSP(数字信号处理器)已逐渐成为扬声器产品设计中非常重要的器件,通过内置算法优化软件调整音质,音色,从量变到质变的过程,增强声音的表现。 AI
    的头像 发表于 12-01 19:59 8.1w次阅读
    新唐科技<b class='flag-5'>推出</b>纯数字端口<b class='flag-5'>DSP</b>(NPCA112D)内置<b class='flag-5'>音效</b>增强算法

    AU6825音频功率放大器的智能音响解决方案

    智能音响结合了先进的音频技术和智能连接功能,为用户提供了丰富的音频体验和便捷的智能控制。英尚微推出的类比半导体智能音响解决方案,采用了高性能的数字
    的头像 发表于 11-12 16:53 658次阅读

    【技术贴】解密艾为飞天™DSP黑科技(一):音频DSP技术演进与设计

    的需求显著增加,推动了数字信号处理器(DSP)的开发与应用。在音频领域,AudioDSP技术得到了快速发展,通过创新的音频算法设计,显著提升了系统音效质量。随着人工
    的头像 发表于 10-29 18:47 507次阅读
    【技术贴】解密艾为飞天™<b class='flag-5'>DSP</b>黑科技(一):<b class='flag-5'>音频</b><b class='flag-5'>DSP</b>技术演进与设计

    SDK音频替换失败记录过程

    在安信可离线语音模组 VC-01、VC-02 系列教程 【中级入门篇】中根据设置的不同回复词和命令字进行了固件生成。我出教程的时候在考虑有没有什么办法来替换到SDK中的音频,在我尝试了各种办法后发现很难办到 (建议直接使用云平台生成。 不要在
    的头像 发表于 09-25 15:50 2128次阅读
    <b class='flag-5'>SDK</b><b class='flag-5'>音频</b>替换失败记录过程

    音频DSP设计与应用

    库,克服了物理扬声器的限制,提供卓越的音频性能和专业级解决方案。 量身定制的专业调优工具具有直观的调试界面,可简化项目开发: 在整个 DSP 系列中,新唐科技采用了 MaxxBass 智能低音增强
    发表于 09-05 07:45

    XR空间音频革命:苹果、三星推出新技术,ASAF成Vision Pro最佳搭档

    (电子发烧友网综合报道)随着技术的不断进步,空间音频标准正处于持续进化之中,众多科技巨头如苹果、三星和谷歌等都在积极布局这一领域。   在WWDC25大会上,苹果推出了新的空间
    的头像 发表于 07-20 00:11 3296次阅读

    德州仪器DSP音频系统如何改善驾乘体验

    ,德州仪器 (TI) 推出了新一代数字信号处理器 (DSP) 音频系统解决方案。这是一款高度集成、基于 Arm 和 TI 新一代 C7x DSP 的单芯片解决方案,能够为汽车用户
    的头像 发表于 05-26 15:42 1369次阅读

    fx3枚举成usb扬声器,电脑无法播放音频是哪里出了问题?

    参考fx3 sdk 1.3.5例程uac_examples,将fx3修改为usb 扬声器,电脑能识别到设备,但电脑无法正常播放音频,fx3
    发表于 05-23 08:21

    AU6825集成音频DSP的2×32W数字型Class D音频

    的调制模式,可以有效降低静态功耗, 如何配合外部 boost 电路,可以实现 class H 算法,从 而有效提升电池供电应用的续航时间。AU6825 内部集成 32 位的高精度音频 DSP
    发表于 05-16 15:16 1次下载