0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

声音的新科技 | 拆解紫光展锐5G芯T820的音频技术

紫光展锐UNISOC 来源:未知 2023-07-28 11:25 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

紫光展锐新一代系统级安全的高性能5G移动平台T820,采用八核CPU架构,6nm EUV先进工艺,金融级全内置安全方案,在性能、功耗与5G通信体验等方面,较上一代产品更为出色。

此前,已经为大家讲解过T820的拍照、AI、安全性能(文末查看往期T820相关文章)。今天,小展将带你一同探索T820的音频性能。

声音是人类感知与交互的重要组成部分,音频应用早已覆盖了人们生活的方方面面,紫光展锐T820从用户角度出发,在语音通话、语音交互、音频播放与录制等维度进行技术创新,带来了全面的体验升级!

自研通话AI降噪,让彼此交流“更清晰”

手机通话到直播、游戏和音视频会议,用户通话的需求越来越多,场景变的越来越复杂,对更清晰的语音诉求越来越强烈。复杂的使用场景对通话降噪算法提出了更大的挑战,传统的通话降噪算法在一些复杂噪声场景下,如鸣笛和风噪,很容易出现语音失真严重和降噪量不足的问题。如何让用户在各种复杂场景下,仍然能够不受周围环境噪声的干扰,听到“更清晰”的语音,成为用户最为紧迫的诉求。AI技术是解决这一诉求的不二之选,不过AI降噪面临以下技术难点:

  • 智能终端设备的内存和算力非常有限,大规模的网络模型难以部署;

  • 噪声场景和种类复杂多变,需要网络具有极高的泛化能力。

通过运用重要性剪枝、基于听觉特性的特征裁剪和损失融合技术,紫光展锐AI降噪技术成功解决了以上难点。目前AI降噪已应用在T820 5G芯片上,支持蜂窝通信、直播、游戏、音视频会议等各种通话应用场景。T820能够在平稳、非平稳等各种噪声场景下实现优异的噪声抑制效果,获取更加清晰的语音。图1为平稳噪声场景处理前后的语音频谱对比图。图2为非平稳噪声场景处理前后的语音频谱对比图。可以看出,无论在何种场景下,紫光展锐AI降噪技术,均能在保证噪声抑制干净的前提下,做到非常完整的语音保留,从而为用户提供 “更清晰”的交流空间。

838bcdca-2cf5-11ee-815d-dac502259ad0.jpg

图1.平稳噪声场景AI降噪处理前后的语音频谱对比图

83c601d4-2cf5-11ee-815d-dac502259ad0.jpg

图2.非平稳噪声场景AI降噪处理前后的语音频谱对比图

视听一体化录制技术,让生活记录“更真实”

随着Vlog等生活方式的流行,人人都可以用智能手机来记录生活,这也对录制技术有了更高的要求。手机音频录制功能也得到越来越多的关注,近年来该功能常作为产品主推的技术亮点之一。视频录制的效果很大程度得益于真实、清晰的音频录制,现在的智能手机拍摄画面的质量越来越高,能拍得更远更清晰。但在许多场景下,想要录制清晰的声音并不简单。当没有与高质量画面匹配的高质量音频时,再好的视频内容也总是不完美的。

图3.视听一体化录制技术示意图

紫光展锐视听一体化录制技术,在录制视频时凸显画面中的目标声音,针对性衰减目标之外的干扰,同时结合视频画面信息对录音进行控制,增加音频与画面的匹配度。

8416b232-2cf5-11ee-815d-dac502259ad0.jpg

图4.非目标方向干扰抑制性能展示

当前市场上,大部分厂商具备类似差异化功能产品均采用三麦方案,而大部分智能手机均采用双麦方案。紫光展锐视听一体化录制技术支持双麦阵列方案,在保证性能情况下,极大地减小了技术的应用成本。在保证目标声音无失真、底噪无明显放大的情况下,最大可放大目标声音12dB以上,最大噪声抑制量可达到6dB左右。如图4,除目标方向90°无衰减外,其余方向均有相应干扰抑制。在突显目标声音能力和噪声抑制能力两项关键性能上,均能达到市场上竞品三麦方案水平,甚至优于部分厂商三麦方案。

紫光展锐视听一体化录制技术将以优秀的性能,助力各种视频录制场景,给用户带来“更真实”的音视频录制体验。

智能功放解决方案,让音频播放 “更动听”

在播放音视频和游戏娱乐等场景中,手机扬声器发出的声音是否动听极大影响用户的使用体验。但随着手机越来越轻薄,能够给到扬声器的空间极为有限,使得扬声器更容易受到振幅、温度的影响。如果扬声器的振膜位移或音圈温度超过安全大小均会导致永久损坏。在保护扬声器安全的前提下,使扬声器播放出音质更好、音量更大的声音,是业界技术发展的共同目标。

紫光展锐的智能功放ISC(Intelligent Speaker Control)技术,能够建立准确的扬声器模型,通过控制电压来控制振膜和温度,使扬声器物尽其用,发挥出最大的性能潜力。目前ISC技术支持前馈及反馈两种方案,满足不同客户的需求。前馈方案无需增加硬件,以较低成本获得最优性能,使智能功放成为普惠技术。而反馈方案增加了电压电流(I/V)的监测通路,能够实时获得扬声器的工作状态,发挥每个单体扬声器的性能可以获得比前馈方案更优的性能。

84580688-2cf5-11ee-815d-dac502259ad0.jpg

图5.智能功放ISC

图6为录制得到的扬声器播放的声音信号,可以看到,与无ISC算法处理相比,ISC算法处理后声音大小显著提高,声压级提升5~8dB,低频提升6-10dB。

8470e9f0-2cf5-11ee-815d-dac502259ad0.jpg

图6.ISC处理效果--声压

除核心的扬声器控制及保护技术外,ISC技术还支持包括音量增强、频响精细调整、动态范围控制、低音增强等功能。频响精细调整功能能够根据客户的需求,得到更均衡的频响。低音增强技术利用心理声学虚拟音调原理,生成低频的谐波即“虚拟低音”,改善小型扬声器低频音质,使用户感知到更具冲击力的低频效果。

紫光展锐的智能功放ISC(intelligent Speaker Control)技术能够发挥扬声器的性能,用户无论在听音乐还是打游戏时,均能听到更悦耳的声音,获取更佳的听音体验。

专用低功耗语音唤醒IC,让终端交互“更智能”

语音助手如今已是智能终端的标配,语音唤醒作为语音交互的门户,从某种程度上来说,其综合性能的好坏,决定了用户使用语音助手的意愿,同时也成为了终端实现智能化的瓶颈。

语音唤醒主要面临以下技术难点:

  • 24小时不间断运行(always on),要求具有极致的低功耗;

  • 严苛的高唤醒率、低误唤醒率要求,确保使用语音助手的用户体验;

  • 较低的计算和内存开销,要求满足实时性和低成本。

传统的语音唤醒方案,通过集成智能麦克风或专用的语音唤醒芯片来解决低功耗问题。但这种多芯片堆叠的方式无疑大幅增加了产品成本,影响了特性在中低端市场的下沉。展锐5G芯片T820集成了专用低功耗语音唤醒IC,仅需要一颗芯片,就能支持完整的唤醒功能,不仅有效解决了性能和功耗之间的矛盾,还降低了下游厂商的方案成本,加速了产品“智能化”的普及。

84a319fc-2cf5-11ee-815d-dac502259ad0.jpg

图7.T820语音唤醒方案

除以上专用IC之外,展锐在算法层面还提供从轻量级到常规级的唤醒与识别算法,形成一整套完整的软硬件一体化解决方案,算法、芯片定制化技术,让资源开销更为合理,综合性能实现安静环境95%、嘈杂环境90%以上的唤醒率,同时误唤醒率小于1次/24小时,为终端语音交互智能化体验保驾护航。

紫光展锐将持续打造业界领先的软硬件一体化音频技术,为消费者带来极致的影音体验!

84c16326-2cf5-11ee-815d-dac502259ad0.gif  

End

往期推荐

1. 紫光展锐发布系统级安全的高性能5G SoC移动平台T820

2. 紫光展锐5G芯片T820,给你满满的安全感!

3. 紫光展锐5G芯片T820—AI释放大能量

4. 紫光展锐T820,拍照质量和性能双提升


原文标题:声音的新科技 | 拆解紫光展锐5G芯T820的音频技术

文章出处:【微信公众号:紫光展锐UNISOC】欢迎添加关注!文章转载请注明出处。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 紫光展锐
    +关注

    关注

    16

    文章

    893

    浏览量

    42341

原文标题:声音的新科技 | 拆解紫光展锐5G芯T820的音频技术

文章出处:【微信号:gh_2c8fa897d02f,微信公众号:紫光展锐UNISOC】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    紫光亮相2025上海世界移动通信大会

    此前,6月18日至20日,2025年上海世界移动通信大会(MWCS 2025)盛大开幕,本届MWCS 大会锚定AI+、5G融合和双区创新三大引擎,紫光携带最新的AI解决方案亮相展会
    的头像 发表于 06-25 11:28 961次阅读

    移远通信 × 紫光,推动FWA “5G+AI”新体验

    的产业化落地进程。该方案以移远5G模组RG620UA-EU为核心,搭载紫光业界首款全面支持5GR16宽带物联网特性的芯片平台V620,凭
    的头像 发表于 06-19 19:49 1077次阅读
    移远通信 × <b class='flag-5'>紫光</b><b class='flag-5'>展</b><b class='flag-5'>锐</b>,推动FWA “<b class='flag-5'>5G</b>+AI”新体验

    紫光多款5G及4G平台完成Android 16同步升级

    近日,紫光5G移动平台T9100、T8200、T
    的头像 发表于 06-16 16:51 1209次阅读

    紫光T8300 5G SoC为用户开创主流音频新体验

    数字化时代,从语音通话到智能交互,从聆听音乐到创作Vlog,声音已成为隐形的基础措施。日益发展的音频技术正在重构用户感知世界的方式,重塑用户的听觉体验。
    的头像 发表于 06-13 10:07 747次阅读

    搭载紫光5G芯片的中兴云笔电与自由屏发布

    近日,搭载紫光5G的全球首款“驭风”系列二合一云笔电及“扶摇”系列5G自由屏震撼上市,以“
    的头像 发表于 05-27 10:04 1502次阅读

    紫光亮相2025全球6G技术与产业生态大会

    近日,全球6G技术与产业生态大会(简称“全球6G技术大会”)在南京召开。紫光
    的头像 发表于 04-18 16:34 1018次阅读

    紫光荣获GTI Awards 2025“移动技术创新突破奖”

    近日,2025年GTI国际产业大会成功举办,活动上GTI Awards 2025获奖名单正式揭晓,紫光连续三年斩获国际权威机构GTI颁发的大奖。此次,T8300凭借在
    的头像 发表于 03-17 09:49 999次阅读

    紫光出席中国联通eSIM 5G AI新品发布会

    近日,西班牙巴塞罗那——世界移动通信大会MWC 2025期间,中国联通携手紫光重磅发布了国内首款支持eSIM、集成中国联通元景大模型的5G平板产品VN300E。作为核心生态伙伴代表
    的头像 发表于 03-07 13:51 1229次阅读

    紫光携手中国联通推出5G eSIM平板VN300E

    2025年3月3日至6日,在全球移动通信行业的年度盛会 —— 世界移动通信大会(MWC 2025)上,紫光联合中国联通重磅发布了支持eSIM的5G平板VN300E。
    的头像 发表于 03-06 17:26 2152次阅读

    紫光联合美格智能推出第二代5G Sub6G R16模组SRM812

    在2025年世界移动通信大会(MWC 2025)期间,紫光携手美格智能正式推出了基于紫光
    的头像 发表于 03-05 17:14 1804次阅读

    紫光携手移远通信发布5G模组RG620UA-EU

    2025年世界移动通信大会(MWC 2025)期间,紫光联合移远通信,正式发布了全面支持5G R16特性的模组RG620UA-EU,以强大的灵活性和便捷性赋能产业。
    的头像 发表于 03-05 17:12 1095次阅读

    MWC 2025|美格智能发布基于紫光V620平台的全新5G通信模组SRM812

    3月5日,在MWC2025世界移动通信大会上,美格智能携手紫光正式推出基于V620平台的第二代5GSub-6GHzR16模组SRM812
    的头像 发表于 03-05 16:19 1708次阅读
    MWC 2025|美格智能发布基于<b class='flag-5'>紫光</b><b class='flag-5'>展</b><b class='flag-5'>锐</b>V620平台的全新<b class='flag-5'>5G</b>通信模组SRM812

    紫光5G SoC T8300优势特性解读 八核CPU架构 双核GPU架构

    ,融合5G NR NTN卫星通信和5G MBS广播功能。 紫光正式推出专为全球主流用户打造的畅享影音和游戏体验的
    的头像 发表于 03-03 18:29 2971次阅读
    <b class='flag-5'>紫光</b><b class='flag-5'>展</b><b class='flag-5'>锐</b><b class='flag-5'>5G</b> SoC <b class='flag-5'>T</b>8300优势特性解读 八核CPU架构 双核GPU架构

    德明利高端存储芯片eMMC通过紫光移动芯片平台认证

    近期,德明利嵌入式存储芯片eMMC,通过主流5G通讯方案商紫光新一代芯片移动平台的产品认证许可,成为德明利首批通过紫光
    的头像 发表于 01-21 16:35 2040次阅读
    德明利高端存储芯片eMMC通过<b class='flag-5'>紫光</b><b class='flag-5'>展</b><b class='flag-5'>锐</b>移动芯片平台认证

    紫光推出高性能4G智能穿戴平台W377E

    近日,紫光正式推出高性能4G智能穿戴平台W377E。该产品面向不同的应用场景,拥有丰富特性和超低功耗,进一步壮大紫光
    的头像 发表于 12-31 17:07 2833次阅读