0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

声加科技助力小米首款支持本地命令词语音唤醒TWS耳机上市

测试测试测试 来源:北国网 2019-09-26 15:00 次阅读

9 月 24 日,小米新一代真无线蓝牙耳机 Air 2正式亮相,在外形和功能上都较一代有了非常大的变化。小米官方海报广告词宣称“智能真无线,轻松舒适戴”,并且将“智能语音唤醒,双麦克风降噪”作为其首条宣传卖点。目前该产品已在小米商城开放预约,9月27日正式上市。

小米Air2宣传海报,图片来源于小米官网

Air2的语音唤醒到底有多智能呢?据本次算法技术支持方案商——声加科技CEO邱锋海介绍,此次小米Air2采用了声加科技提供的耳机本地语音识别方案,与市面同类产品最大的不同是能直接在Air2耳机端完成多命令词语音识别,急速响应命令——用户在播放音乐时无需唤醒语音助手“小爱同学”,可直接向耳机发出语音指令“上一首/上一曲”,“下一首/下一曲”,迅速实现自由切歌,无需再等待语音助手唤醒手机进行响应,大大提高了用户使用体验。

小米Air2宣传海报,图片来源于小米官网

邱锋海表示,耳机搭载语音助手已经成为目前TWS耳机的主流趋势,但目前市面上绝大部分产品使用的还是以基于手机的语音识别方案,用户每一次的语音指令都要首先唤醒手机语音助手,造成响应速度较慢(切换歌曲需要等待5~6秒),不少用户因此放弃了语音唤醒功能,宁可使用手势或按键,甚至只能拿出手机进行操作,体验欠佳。其原因主要受限于耳机运算能力较弱以及电池续航时间短,给耳机端进行精确的语音识别造成了极高难度。而声加科技的小资源关键词唤醒(KWS)有限语音命令方案攻克了技术难点,可实现唤醒低功耗计算方案,KWS启动和手机语音交互,有限语音命令实现切歌、调音量等基本操作。在算法所需资源消耗上,低至30Mips, 50KBytes memory的唤醒词模型(m4f平台),模型规模可变,能根据产品计算资源快速调整模型,还能整合声加自有前端语音增强,优化整体性能。

除此之外,耳机使用场景复杂且运算资源受限,如果只依靠基于深度学习的小资源语音识别模型,在嘈杂环境下会存在误识率高、识别率低的问题。而Air2同时还搭载了声加科技的双麦SVE降噪技术,如定向拾音、环境降噪(尤其是风噪抑制)等,能有效降低通话时的环境噪声,即使身处嘈杂环境,也能保障高清晰的语音识别以及通话质量。

对小米Air2直接说“下一首”,迅速切换歌曲

据了解,声加科技成立于2018年1月,专注于通信声学核心技术,依托于中科院声学所雄厚的人才和科研资源,打造产学研一体化。其SVE(Soundplus Voice Enhancement)降噪技术可以广泛应用于耳塞式耳机、半入耳式耳机、入耳式耳机、头戴式耳机、挂耳式耳机等,是通过双麦克风阵列,精准计算通话者说话的方位,在保护主方向目标语音的同时,去除环境中的各种干扰噪声,例如其他人的讲话声、交通工具产生的噪音、风噪声等等,有效抑制90%的反向环境噪声,由此降低环境噪声最高可达30dB,保证高品质通话效果。让使用者无论身处何种嘈杂环境,都可细语轻聊,无惧干扰。其核心技术包括:

回声消除AEC:

支持单通道回声抵消、双通道立体声回声抵消,可在设备自身播放大音量时轻松唤醒,ERLE》30dB。

声源定位Direction of arrival estimation:

支持多源定位;可在强混响及噪声干扰情况下准确定位目标声源;工作信噪比可低至0db以下;DOA分辨率《10°。

波束形成Beamforming:

保护目标语音的同时,去除噪声干扰与散射噪声,大幅提高语音识别率;稳态噪声抑量》30dB,非平稳噪声印制量》24dB。

关键词唤醒、有限语音命令词识别Key word spotting、command

基于深度神经网络训练,根据前端算法进行深度优化,精确辨识关键词,超低误唤醒。消耗资源配置灵活(小模型超低资源占用;资源丰富时可实现高性能识别),可应用于耳机、手环、手表等可穿戴智能设备。5米唤醒率》93%,3米唤醒率》97%,误唤醒《2次/48H。

基于机器学习降噪/识别

已成功用于声学建模,与标准GMM模型相比语音识别率实现了大幅改进,DNN是全连接神经网络,解决了局部最优解的问题;卷积神经网络CNN降低模型体积,充分利用语谱中的局部信息;循环神经网络RNN可以对时间序列进行建模,适合处理语音信号。对动态/稳态噪声均有效(~30dB)同时保护语音成分,表现鲁棒。

音效:

EQ均衡:通过对各种不同频率的电信号的调节来补偿扬声器和声场的缺陷,补偿和修饰各种声源及其它特殊作用。

虚拟环绕声:在双声道立体声的基础上,不增加声道和音箱,把声场信号通过电路处理后播出,使聆听者感到声音来自多个方位。

SVE开启前后对比(公路噪声):

此外,作为智能听觉的创新公司,声加科技的耳机技术方案还应用在了华为Flypods、小米Air、小米Air2、万魔EM001、万魔EM004、京东京鱼座等产品上。目前,其团队凭借十余年的技术积累,可为B端客户提供复杂场景下的近场、中场、远场语音交互技术方案,以及从芯片、模组、PCBA到工业设计的一站式产品方案。其回声抵消、噪声抑制、声源定位、混响消除、波束形成、语音唤醒等性能在行业内均名列前位。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 小米
    +关注

    关注

    68

    文章

    14133

    浏览量

    141769
收藏 人收藏

    评论

    相关推荐

    2024年小米汽车产业链分析及新品上市全景洞察报告

    2024年小米汽车产业链分析及新品上市全景洞察报告 *附件:小米汽车全面洞察报告.pdf 本文主要介绍了小米汽车在市场中的布局和优势,以及其面临的劣势与挑战。
    发表于 03-29 13:46

    iQOO发布iQOO TWS 2真无线耳机支持Snapdragon Sound骁龙畅听技术

    近日,iQOO发布iQOO TWS 2真无线耳机,全新产品基于第二代高通®S3音频平台打造,支持Snapdragon Sound 骁龙畅听技术,助力iQOO
    的头像 发表于 03-05 15:52 339次阅读

    探索TWS蓝牙耳机的技术奥秘

    解决TWS耳机传输及音质问题的关键在于蓝牙技术与音频编解码技术发展,这些通常集成在TWS耳机的主控蓝牙芯片SoC内,因而蓝牙SOC芯片对TWS
    的头像 发表于 01-08 14:45 3420次阅读

    TWS耳机上下游产业链技术分析

    电子发烧友网站提供《TWS耳机上下游产业链技术分析.pdf》资料免费下载
    发表于 12-13 11:20 1次下载
    <b class='flag-5'>TWS</b><b class='flag-5'>耳机上</b>下游产业链技术分析

    语音识别能够本地实现吗?

    不依靠网络,本地实现语音识别,只需要特定的控制命令就可以。
    发表于 11-10 06:49

    AT32上实现关键词语音识别(KWS)

    AT32上实现关键词语音识别(KWS)本文基于此开源模型和代码,在AT32 MCU 上对KWS 效果进行展示。
    发表于 10-26 07:45

    TWS耳机上下游产业链分析

    TWS耳机即真无线立体声蓝牙耳机,又称双耳独立式蓝牙耳机,是将TWS技术应用于蓝牙耳机领域所开发
    发表于 10-18 16:22 3次下载
    <b class='flag-5'>TWS</b><b class='flag-5'>耳机上</b>下游产业链分析

    TWS蓝牙耳机等离子表面处理,增加产品附着力#机械制造

    蓝牙耳机TWS
    cousz
    发布于 :2023年08月17日 13:56:33

    语音识别唤醒词:让智能设备主动“听”你的声音

    语音识别唤醒词是指在语音助理和智能设备中使用的特定词语或短语,用于唤醒设备并启动语音交互。随着智
    的头像 发表于 08-07 20:21 1258次阅读

    华为新专利:TWS耳机交互升级,耳机将集成摄像头

    的推动,心率监测、体温监测等人体生理体征检测与监测功能也逐渐应用到TWS耳机上。   除了音频、人体生理体征监测等功能升级,TWS耳机的另一大升级是人机交互体验的提升。
    的头像 发表于 07-25 00:00 1688次阅读
    华为新专利:<b class='flag-5'>TWS</b><b class='flag-5'>耳机</b>交互升级,<b class='flag-5'>耳机</b>将集成摄像头

    语音识别唤醒词-开启智能化的语音交互时代

    语音识别唤醒词是指在语音交互系统中使用的特定词语或短语,用于唤醒系统并启动语音识别功能。这项技术
    的头像 发表于 07-09 00:53 952次阅读

    语音识别唤醒词的技术与应用

    语音识别唤醒词是指一种特定的语音指令,能够唤醒智能语音助手或语音识别系统。这种特定的
    的头像 发表于 06-24 04:02 908次阅读

    卷完TWS卷OWS,耳机市场烽烟再起

    电子发烧友网报道(文/莫婷婷)TWS耳机赛道上的竞争进入白热化,不管是终端还是上游供应链厂商都在极度“内卷”的情况下度过了2022年。进入2023年,“创新”成为TWS耳机市场持续增长
    的头像 发表于 05-29 01:25 5567次阅读
    卷完<b class='flag-5'>TWS</b>卷OWS,<b class='flag-5'>耳机</b>市场烽烟再起

    南芯科技TWS耳机10C超快充完整方案介绍

    据相关数据统计,2022年TWS 耳机全球销量2.8 亿台,在消费电子产品销量排行中处于领先位置。TWS 耳机凭借小巧的外观,轻便易携带的特性,以及从百元到千元的价位阶段,深受广大消费
    的头像 发表于 05-20 10:15 921次阅读
    南芯科技<b class='flag-5'>TWS</b><b class='flag-5'>耳机</b>10C超快充完整方案介绍

    IP5516 TWS蓝牙耳机充电仓方案

    KF科发鑫电子:IP5516 TWS充电盒方案的福音为提供全套技术支持 一,概述: IP5516一集成升压转换器、锂电池充电管理、电池电量指示的多功能电源管理SOC,为TWS蓝牙
    发表于 05-02 16:29