0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

端侧 AI 音频处理器:集成音频处理与 AI 计算能力的创新芯片

842221752 来源:电子发烧友 作者:综合报道 2025-02-16 00:13 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

电子发烧友网综合报道:端侧 AI 音频处理器是专为智能物联网(AIoT)端侧设备设计,集成了人工智能(AI)加速器的系统级音频处理器。这类处理器旨在打造低功耗、高算力的芯片平台,以满足智能物联网设备对人工智能应用日益增长的需求。

集成音频处理与 AI 计算能力

端侧 AI 音频处理器的组成结构通常较为复杂,常采用多核异构架构,将不同类型的处理器核心组合在一起,从而高效处理各种任务。这种架构一般包括 CPU、NPU、uDSP 等。
CPU(中央处理器):负责处理通用计算任务,如指令解析、任务调度等。在端侧 AI 音频处理器中,CPU 可能采用 RISC-V 等高效能低功耗架构,例如 AndesCore D25F 处理器,主频可达 400MHz 以上。

·NPU(神经网络处理器):专门针对神经网络计算进行优化,提供强大的 AI 计算能力。
·NPU 的算力可达数十到数百 GOPS(每秒十亿次操作),能够支撑复杂的语音识别、语音合成等 AI 应用。
·uDSP(微数字信号处理器):专注于数字信号处理,依据已知需求和算法积累,作为专项并行加速器。uDSP 能够高效处理音频信号,实现音频降噪、回声消除、声音美化等功能。

端侧 AI 音频处理器还包含音频处理模块,其中音频 ADCDAC 是重要组成部分。音频 ADC(模拟到数字转换器)负责将模拟音频信号转换为数字信号进行处理,而 DAC(数字到模拟转换器)则将处理后的数字信号转换回模拟信号输出。端侧 AI 音频处理器的音频 ADC 和 DAC 通常具备高性能和高动态范围,例如动态范围超过 105dB,THD+N(总谐波失真加噪声)小于 - 95dB 等。此外,还有音频放大器,用于放大音频信号,驱动扬声器等设备发声。在端侧 AI 音频处理器中,可能集成 0V 直驱耳机放大器模块,以提供高质量音频输出。

端侧 AI 音频处理器还集成了丰富的外设接口,以便与其他设备连接和通信,包括 USB 接口、SD 接口、SPI、UARTI2C、I2S 等。USB 接口,如 USB2.0 或更高版本,可用于与计算机、手机等设备连接;SD 接口用于读取 SD 卡等存储设备中的音频文件;SPI、UART、I2C、I2S 等接口则用于与各种外设进行串行通信和数据传输。

端侧 AI 音频处理器还配套提供丰富的 AI 算法和软件支持,方便用户开发和部署智能音频应用,如 AI 降噪、AI 回声消除、AI 啸叫抑制、语音识别等,能显著提升音频处理效果和用户体验。

端侧 AI 音频处理器应用场景不断拓展

端侧 AI 音频处理器应用场景广泛,涵盖智能物联网(AIoT)领域多个方面。在智能音箱中,端侧 AI 音频处理器能够支持语音唤醒、语音识别、语音合成等功能,实现用户与音箱的自然语言交互。在智能家居系统中,它可用于声音控制家电设备,如通过语音指令调节灯光、空调、电视等。它不仅能识别用户语音指令,还能根据家庭环境和用户习惯进行智能决策,提供更个性化的智能家居体验。

端侧 AI 音频处理器也可应用于智能办公设备,如智能录音笔、智能会议系统等。它能提供高质量音频录制、实时语音转写、语音翻译等功能,提升办公效率和准确性。在会议系统中,端侧 AI 音频处理器可实现多人语音识别、语音增强、回声消除等功能,确保会议过程中语音清晰,沟通顺畅。同时,还能支持智能会议记录、语音指令控制等功能,提升会议效率和管理水平。

端侧 AI 音频处理器还可集成在智能手表和智能耳机中,实现语音控制、智能提醒、健康监测等功能。通过低功耗设计和高效能计算,在保证设备续航的同时,提供高质量音频处理和智能交互体验。在智能车载设备中,端侧 AI 音频处理器也能支持语音导航、语音控制等功能,提升驾驶安全性和便利性。

随着人工智能技术的不断发展和智能终端设备的普及,端侧 AI 音频处理器的市场需求持续增长。不少芯片厂商积极布局,推出一系列高性能、低功耗的端侧 AI 音频处理器产品。
例如普林芯驰,此前推出全新一代 SPV60 系列端侧 AI 音频处理器芯片,采用 CPU+NPU+uDSP 多核异构架构,集成了 Andes D25F 处理器、普林芯驰自研的 uDSP 以及 AI 神经网络处理器内核 NPU。该芯片在音频处理领域表现出色,集成高性能的音频 ADC/DAC 转换器以及 0V 直驱耳机放大器模块,性能达到准专业级水平。SPV60 系列芯片可广泛应用于智能语音、智能耳机、专业音频等领域,目前已进入量产流程。

炬芯科技在端侧 AI 音频处理器领域也有布局,其芯片产品整合了低功耗 AI 加速引擎,并采用 CPU、DSP 加 NPU 的三核异构计算架构,打造低功耗端侧 AI 算力。例如,炬芯 ATS3031 是一款高音质、低延迟、低功耗无线音频 SoC,支持 32K 双麦 AI 降噪,广泛应用于蓝牙收发一体器、无线麦克风等产品。

除此之外,还有多家公司在端侧 AI 音频处理器领域有所布局,如全志科技、乐鑫科技等。全志科技推出的 T 系列芯片中,部分型号集成了 AI 处理能力,能够支持复杂的音频处理任务。乐鑫科技的 ESP32-S 系列芯片在保持原有连接性能的基础上,强化了边缘 AI 方向的应用,例如 ESP32-S3 芯片增加了用于加速神经网络计算和信号处理等工作的向量指令,实现了高性能的图像识别、语音唤醒和识别等应用。

写在最后

随着人工智能技术的不断发展和智能终端设备的普及,端侧 AI 音频处理器的市场需求持续增长,众多芯片厂商积极布局。同时,随着半导体工艺制程的不断进步和 AI 算法的持续优化,端侧 AI 音频处理器的性能将进一步提升,应用场景也将不断拓展。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 音频处理器
    +关注

    关注

    2

    文章

    117

    浏览量

    34089
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    DNR6521x_VC1:革新音频体验的AI降噪处理器

    在当今数字时代,高质量的音频处理需求日益增长。无论是直播、游戏、会议还是专业录音,都需要清晰、纯净的声音体验。DNR6521x_VC1作为一款基于XMOS处理器架构的AI深度降噪
    的头像 发表于 10-15 16:59 1283次阅读
    DNR6521x_VC1:革新<b class='flag-5'>音频</b>体验的<b class='flag-5'>AI</b>降噪<b class='flag-5'>处理器</b>

    DNR65211-VC1单通道AI深度降噪处理器技术解析

    一、产品概述DNR65211-VC1是飞腾云音频推出的高性能AI音频处理方案,基于XMOS处理器架构设计,专为直播/会议/户外等场景提供智能
    的头像 发表于 10-08 15:32 348次阅读
    DNR65211-VC1单通道<b class='flag-5'>AI</b>深度降噪<b class='flag-5'>处理器</b>技术解析

    炬芯科技亮相2025亚洲AI音频大会

    近日,2025亚洲AI音频大会在深圳成功举办,作为中国行业现象级盛会之一,大会分享和展示音频技术的最新成果。炬芯科技便携式音频事业部产品总监张洪波受邀出席,以《全场景
    的头像 发表于 09-29 11:36 4179次阅读

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片到AGI芯片

    建立的基础: ①算力支柱②数据支柱③计算支柱 1)算力 与AI算力有关的因素: ①晶体管数量②晶体管速度③芯片架构④芯片面积⑤制造工艺⑥芯片
    发表于 09-18 15:31

    【「AI芯片:科技探索与AGI愿景」阅读体验】+第二章 实现深度学习AI芯片创新方法与架构

    射频模拟处理器的原型与概念验证 3、光电组合AI芯片 目前最好的应对Transformer模型需要的极高算力的方法之一就是使用光子计算芯片
    发表于 09-12 17:30

    光子 AI 处理器的核心原理及突破性进展

    电子发烧友网(文 / 李弯弯)光子 AI 处理器,作为一种借助光子执行信息处理与人工智能(AI计算的新型硬件设备,正逐渐崭露头角。与传统基
    的头像 发表于 04-19 00:40 3642次阅读

    AI 芯片:终端智能落地的核心引擎

    电子发烧友网报道(文 / 李弯弯) AI 芯片,是专门为在诸如智能手机、IoT 设备、自动驾驶汽车等终端设备上,高效运行人工智能算法而设计的处理
    的头像 发表于 04-14 02:11 3998次阅读

    首创开源架构,天玑AI开发套件让AI模型接入得心应手

    时间。 这不仅仅是工具的升级,更是迈向智能体化用户体验的关键基础设施。 天玑AI开发套件 2.0,全面释放天玑AI能力 去年,天玑
    发表于 04-13 19:52

    市场上主流的AI MPU 大全

    当前市场上主流的AI MPU(Micro Processing Unit,微处理器)品牌及型号盘点,涵盖不同应用场景(如物联网、边缘计算
    的头像 发表于 04-02 17:44 3310次阅读

    AI SoC#炬芯科技 AI 处理器芯片:三核异构,存内计算

    炬芯科技 AI 处理器芯片产品主要为CPU+DSP双核异构高算力单芯片解决方案,现在主推的
    的头像 发表于 03-24 14:27 2676次阅读
    <b class='flag-5'>AI</b> SoC#炬芯科技<b class='flag-5'>端</b><b class='flag-5'>侧</b> <b class='flag-5'>AI</b> <b class='flag-5'>处理器</b><b class='flag-5'>芯片</b>:三核异构,存内<b class='flag-5'>计算</b>

    两大芯片厂商比拼AI音频芯片,高算力蓝牙6.0成亮点

    ,广泛应用于各类智能设备中。就在近期,炬芯科技、中科蓝讯均发布了公司新一代AI芯片。   不同场景对AI
    的头像 发表于 03-24 08:51 2769次阅读

    炬芯科技再发端 AI音频芯片 ATS362X 低功耗大算力引爆音频新浪潮

    随着Deepseek掀起的又一波热潮,炬芯科技顺应人工智能从云端到迅速扩展的趋势,作为炬芯科技AI
    的头像 发表于 03-12 11:05 798次阅读

    炬芯科技ATS362X 低功耗大算力AI音频芯片

    随着Deepseek掀起的又一波热潮,炬芯科技顺应人工智能从云端到迅速扩展的趋势,作为炬芯科技AI
    的头像 发表于 03-10 15:05 1606次阅读
    炬芯科技ATS362X 低功耗大算力<b class='flag-5'>AI</b><b class='flag-5'>音频芯片</b>

    炬芯科技发布ATS323X系列AI音频芯片

    刚过去不久,炬芯科技宣布全新一代基于模数混合SRAM存内计算(Mixed-mode SRAM based CIM,简称“MMSCIM”)技术的AI
    的头像 发表于 12-12 14:58 1673次阅读

    广和通开启AI新时代

    AI发展正酣,随着终端芯片算力越来越高、模型能力越来越强、实时响应及隐私保护的
    的头像 发表于 12-12 10:35 1293次阅读