0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

开放式音频系统引入AI大模型,蓝牙音频SOC迈向高端化

Monika观察 来源:电子发烧友 作者:莫婷婷 2024-07-16 09:09 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

电子发烧友网报道(文/莫婷婷)随着技术的迭代以及市场需求的兴起,智能眼镜作为一种新型智能穿戴设备,可以通过独立的操作系统,安装各种应用程序,并通过语音、手势,或者与智能手表、智能手机的联动,实现多种功能,如今正逐渐成为市场的焦点。

不过智能眼镜设备不能忽视的挑战是其开放式音频系统,音频作为智能眼镜最基础的功能,在完成多种交互体验之外,如何实现更好的音频体验,也是需要不断突破的技术难题。


AI技术加持,推进蓝牙音频SOC的高端化

OWS耳机、智能音频眼镜等产品,对开放式的音频系统提出了更高的要求。面对开放式的音频系统,主控芯片的技术瓶颈、难点是在哪里?

物奇微蓝牙产品线销售负责人陈武清在接受电子发烧友网采访时表示,开放式的音频系统有着三大挑战,一是低频泄露问题,二是大回声结构下的通话效果和运动风噪场景下的通话质量问题,三是轻巧舒适结构状态小尺寸的设计对电池的要求的低功耗。

为了符合人体工学的设计,大多数OWS耳机都采用U型声学腔体结构,内部搭载了发声单元,例如SoundPEATS 的GoFree2,以及beyerdynamic拜雅的VERIO 200都搭载了超大16.2mm动圈单元。较大的动圈单元在低频响应和声压级上有更好的表现,但依旧解决不了低频泄露、通话效果、降风噪等方面的挑战。

陈武清提到,开放式耳机的通话大回声结构存在mic-spk间距短,声隔离弱、信回比低的问题,相对入耳式,有效回波损耗 (ERL) 小近20dB、通话回声双讲效果差。

同样有着开放式音频系统的智能眼镜,在音频系统存在的挑战不比OWS耳机小。一般而言,OWS耳机会通过不同的人体工学结构设计,让前出声孔靠近耳道,改善开放式音频系统的音量、低音体验等问题,这些不同的人体工学设计虽然治标不治本,但都能够在一定程度上提升音频体验。而智能眼镜的音频系统在镜腿的位置,难以通过上述方式进行改善。

随着技术的发展,AI已经成为提升开放式音频系统音频体验的关键技术之一。据了解,物奇的多模态AI能力已经落地多个领域,其中边缘计算AI处理技术已经引入蓝牙音频SOC中。

为了提升开放式音频系统的通话质量,物奇基于先进的循环神经网络和卷积神经网络,经过40G的大量数据训练大模型,加上LMS+KLM双滤波结构,线性回声抑制能力达30dB,非线性残余回声引入AI处理。在降风噪等方面,通过多麦技术、神经网络算法的加持,通过大量风噪数据训练AI模型,达到了风噪残留少、语音稳定,损伤小,可辨度高的效果。

相较以往只是在算法上做处理,加入边缘计算AI处理技术能够实现更清晰的通话质量,在很大程度上提升了开放式音频系统的音频体验。

在功耗方面,智能眼镜的蓝牙芯片、传感器、麦克风等元器件基本放在镜腿的位置,受限于空间的限制,一般只能采用容量较小的电池,因此续航性能较差,此时需要蓝牙芯片也要有强大的低功耗性能。

物奇的蓝牙芯片在提升续航方面带来创新和突破。率先采用RISC-V + DSP的设计架构,以及多模块化处理的软件SDK。以OWS的应用为例,物奇可以在芯片级功耗只有3.xmA的情况下,增加了针对OWS形态必须增加的低频补偿/虚拟低音/动态EQ和多MIC AI的ENC等算法,让功耗维持在4.xmA的低功耗水平,“在45mAh的电池容量下,听音乐可以使用10小时”。

在芯片厂商的技术迭代下,AI技术在音频处理上的应用取得了新的进展,AI技术引入蓝牙音频SOC,成为蓝牙音频SOC走向高端的象征之一,由此也将推动音频市场的创新和进步。


音频眼镜将在音频设备市场上逐渐起量

今年一季度,全球个人智能音频设备市场迎来6%的同比增长,出货量超过9000万台。在TWS耳机、无线颈挂式、无线头戴式三大类产品中,TWS耳机品类已经出现增长乏力,笔者认为,接下来OWS耳机、智能音频眼镜将成为智能音频设备市场中增长明显的细分品类。

如果从智能眼镜这个大品类来看,智能音频眼镜这一品类也会首先在市场上起量。陈武清认为在AI/智能音频/AR智能眼镜三大品类中,智能音频眼镜会率先起量,其次是AI眼镜,最终朝着包含音频/视频/内容为一体的AR智能眼镜方向演进。

“智能音频眼镜会先开始起量,在当前技术背景下优先解决轻巧和轻度语音处理的问题,其次通过技术的演进延伸到可以具备AI语音处理能力的AI眼镜,再继续演进到包含音视频及内容为一体的AR智能眼镜,需要解决痛点非常多。”

陈武清表示,对于芯片而言,主芯片平台需要高集成度以及丰富的外设接口和AI处理能力,在各种各样的语音/视频处理算法的加持下,维持高算力下的低功耗要求。

从长期的演进来看,信息/数据经过终端的基础处理后,会到云端做进一步的处理,因此设备在终端的处理会越来越多,同时在云端处理的需求也会增长。随着智能眼镜需要处理的场景越来越多,云端也需要有更强的能力去应对这些处理任务。但在这之前,终端设备的主芯片平台需要更加强大应对更复杂的终端处理任务,芯片厂商也需要持续迭代产品推出更具竞争力的芯片。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 音频
    +关注

    关注

    31

    文章

    3135

    浏览量

    84933
  • 蓝牙
    +关注

    关注

    119

    文章

    6226

    浏览量

    177556
  • soc
    soc
    +关注

    关注

    38

    文章

    4514

    浏览量

    227642
  • AI大模型
    +关注

    关注

    0

    文章

    394

    浏览量

    942
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    WT2605C语音芯片:蓝牙音频播放+BLE透传,引领智能设备语音交互革新

    一、双模蓝牙技术:音频与通信的完美融合1.1蓝牙音频播放与BLE透传的协同优势WT2605C作为一款高性能音频蓝牙芯片,创新性地将传统
    的头像 发表于 11-11 09:07 405次阅读
    WT2605C语音芯片:<b class='flag-5'>蓝牙音频</b>播放+BLE透传,引领智能设备语音交互革新

    【飞凌OK-MX9596-C开发板试用】②体验WIFI、蓝牙音频、视频,为AI应用打下基础

    大的一款板子,搭载了超强的多核处理器,非常适合开发工业互联、AI应用等,本篇体验下开发板的WIFI、蓝牙音频、视频模块,为后续开发AI应用打下基础。 第一部分:WIFI功能 本机搭载
    发表于 10-21 18:17

    两个设备蓝牙音频改用一个怎么实现

    两个设备蓝牙音频改用一个怎么实现
    发表于 07-22 09:28

    蓝牙音频串口透传开发板音频接收方案

    在物联网与智能硬件爆发的时代,开发者急需一款能同时攻克音频处理与数据通信痛点的全能工具。ANS-DB003M的出现,或许正是答案。今天,我们就来深度测评一款备受瞩目的产品—ANS-DB003M蓝牙音频
    的头像 发表于 06-06 16:48 786次阅读
    <b class='flag-5'>蓝牙音频</b>串口透传开发板<b class='flag-5'>音频</b>接收方案

    德州仪器DSP音频系统如何改善驾乘体验

    如今,驾乘已成为我们生活的一部分,如何改善驾乘体验对音频系统提出了更高的要求。随着高端音响的发展以及电动汽车 (EV) 的普及,汽车音频系统设计师需要将听觉体验提升到新的高度。为了应对这一需求
    的头像 发表于 05-26 15:42 858次阅读

    Wi-Fi音频传输+百倍AI性能飞跃!开放式耳机上新高度

    耳机。这款产品以首款支持Wi-Fi技术的开放式耳机,及实现100倍AI功能提升(相比上一代产品)的特点备受关注。     骁龙 S7+音频平台再落地,开放式耳机也支持 Wi-Fi
    的头像 发表于 04-28 00:14 3423次阅读
    Wi-Fi<b class='flag-5'>音频</b>传输+百倍<b class='flag-5'>AI</b>性能飞跃!<b class='flag-5'>开放式</b>耳机上新高度

    蓝牙音频模块中了解I2S的主端和从端功能应用

    在无线音频领域,蓝牙I2S(Inter-ICSound)技术正逐渐成为高保真音质的核心解决方案。不同于传统蓝牙音频的二次编解码损耗,蓝牙I2S通过主端(Master)和从端(Slave
    的头像 发表于 04-25 16:06 878次阅读
    从<b class='flag-5'>蓝牙音频</b>模块中了解I2S的主端和从端功能应用

    亿佰特首款高通芯BLE5.1蓝牙音频模块!还有蓝牙测试套件、USB转接板上新!

    新品上市BLE5.1蓝牙音频模块USB转TTL转接板蓝牙模块测试套件部分新品参与送样文末了解详情↓↓↓EWM104-BT5125系列BLE5.1蓝牙音频模块EWM104-BT5125系列是亿佰特推出
    的头像 发表于 04-17 19:34 1166次阅读
    亿佰特首款高通芯BLE5.1<b class='flag-5'>蓝牙音频</b>模块!还有<b class='flag-5'>蓝牙</b>测试套件、USB转接板上新!

    蓝牙音频模组中模拟音频和数字音频如何选择?

    蓝牙模块中我们常说的模拟音频和数字音频,是指两种不同的信号处理技术,它们都可以实现声音的录制、存储、编辑、压缩或播放,但也有一些区别和特点。本文将为您深入解析蓝牙数字
    的头像 发表于 04-17 15:55 835次阅读
    <b class='flag-5'>蓝牙音频</b>模组中模拟<b class='flag-5'>音频</b>和数字<b class='flag-5'>音频</b>如何选择?

    蓝牙音频接收模块助力儿童玩具智能

    音频蓝牙模组在玩具中的应用非常常见,特别是在需要音频互动、音乐播放或语音功能的玩具中。一、应用场景1.音乐播放玩具:玩具通过蓝牙连接主设备(如手机或平板),播放存储在主设备中的音乐或音
    的头像 发表于 01-10 15:57 1111次阅读
    <b class='flag-5'>蓝牙音频</b>接收模块助力儿童玩具智能<b class='flag-5'>化</b>

    NVIDIA推出开放式Llama Nemotron系列模型

    作为 NVIDIA NIM 微服务,开放式 Llama Nemotron 大语言模型和 Cosmos Nemotron 视觉语言模型可在任何加速系统上为
    的头像 发表于 01-09 11:11 1193次阅读

    深入了解山景蓝牙音频解码器的工作原理以及应用领域

    蓝牙音频解码器是一种用于将数字音乐解码成模拟声音信号的装置。蓝牙解码器现在被广泛应用于智能手机、平板电脑和电脑等数字音乐播放设备,能够一定程度上提高音质,让音乐更加高保真。
    的头像 发表于 01-08 09:39 2165次阅读
    深入了解山景<b class='flag-5'>蓝牙音频</b>解码器的工作原理以及应用领域

    提升车载音频体验,FSC-BT1035 蓝牙双模音频模块助力智能车载系统

    在现代车载系统中,音频体验不仅仅是娱乐,更是智能互联的重要组成部分。无论是驾驶途中流畅的音乐播放,还是通话过程中清晰的语音传输,FSC-BT1035 蓝牙音频模块都能提供卓越的支持。作为
    的头像 发表于 01-06 09:44 974次阅读

    飞易通发布蓝牙音频发射器,助力老式设备升级LE音频体验

    实现高保真LE(低功耗)音频流的传输,与兼容的终端设备无缝连接。 FSC-BP401蓝牙音频发射器集成了Nordic Semiconductor的nRF5340高端多协议SoC。该
    的头像 发表于 12-25 16:18 1165次阅读

    大联大控股友尚推出基于炬芯ATS2853的蓝牙音箱方案

    。 ATS2853是炬芯科技推出的一款高度集成的单芯片蓝牙音频SoC,支持双模蓝牙5.3规格,能够作为传统的双扬声器和读卡器进行数据传输。该芯片内部集成了高性能收发器、功能丰富的基带处理器和
    的头像 发表于 12-18 11:31 2804次阅读