0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

端侧 AI 芯片:终端智能落地的核心引擎

Carol Li 来源:电子发烧友网 作者:李弯弯 2025-04-14 02:11 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

电子发烧友网报道(文 / 李弯弯)端侧 AI 芯片,是专门为在诸如智能手机IoT 设备、自动驾驶汽车等终端设备上,高效运行人工智能算法而设计的处理器。通过硬件级优化,它们能够实现低功耗、高实时性的 AI 计算,构成了端侧 AI 落地的核心硬件基础。

为何需要端侧 AI 芯片?随着 AI 技术不断发展,传统芯片暴露出局限性。CPUGPU 虽通用性强,但能效比较低,难以契合移动设备对功耗的严苛要求;依赖云端则会引发延迟、隐私以及网络稳定性等问题。与之相比,专用端侧 AI 芯片优势显著,具备高能效比、低延迟、隐私安全保障以及离线运行能力等特性。

端侧 AI 芯片的核心技术涵盖架构设计与关键技术创新等方面。在架构设计上,NPU(神经网络处理单元)堪称端侧 AI 芯片的核心。它是专为神经网络设计的加速器,像华为昇腾 NPU、Apple 神经引擎等,支持并行计算以及 INT8/FP16 低精度运算。

再者是异构计算架构,现代端侧 AI 芯片普遍采用该架构,集成了 CPU、GPU、NPU、DSP数字信号处理器)等多种计算单元,以应对各类不同的计算任务,高通 Hexagon 便是典型代表。

在关键技术创新方面,量化计算可支持 INT4/INT8 低精度运算,有效提升能效,联发科 APU 就是范例;稀疏化加速技术能够跳过零值权重计算,例如特斯拉 Dojo 芯片;存算一体技术可减少数据搬运功耗(即存内计算,如存算一体芯片);动态调度技术能够依据任务负载动态分配算力,ARM Ethos NPU 便是如此。

主流的端侧 AI 芯片厂商及产品有哪些?在此列举部分广为人知的厂商及其产品。华为海思昇腾(Ascend)系列,属于面向边缘推理的 AI 芯片,如 Ascend 310;麒麟 SoC 集成了 NPU,像麒麟 9000,可支持手机端 AI 任务。

高通骁龙移动平台,部分型号支持端侧 AI,比如骁龙 8 Gen 2 集成了 Hexagon 处理器,算力超过 60 TOPS;QCS 系列则是面向物联网设备的 AI 芯片,例如 QCS8250 支持 15 TOPS 算力。

联发科天玑系列集成了 AI 处理器,可支持端侧 AI 任务。

苹果 A 系列 / M 系列芯片集成了神经网络引擎,像 A17 Pro 算力达 35 TOPS,M2 芯片算力达 15.8 TOPS。

三星 Exynos 系列,例如 Exynos Auto V 系列,是面向车用的 AI 芯片,算力超过 10 TOPS。

英特尔 Movidius VPU 专为视觉 AI 优化,比如 Myriad X 支持 4 TOPS 算力。

地平线(Horizon Robotics)征程系列面向自动驾驶和智能座舱,如征程 5 算力达 128 TOPS。

寒武纪(Cambricon)MLU 系列,像 MLU220 支持 8 TOPS 算力,面向边缘推理。

全志科技(Allwinner)V/R 系列,例如 V853 集成了 NPU,算力 1.2 TOPS,适用于智能摄像头。

瑞芯微Rockchip)RK3588 内置 6 TOPS NPU,支持旗舰级边缘计算。

当前,端侧 AI 芯片的发展面临诸多挑战:在能效平衡方面,移动设备需要在 1W 以下功耗实现 TOPS 级算力;算法适配层面,芯片需要支持动态稀疏化、混合精度等前沿算法;开发门槛上,存在厂商专用工具链(如华为 MindSpore Lite)与通用框架(TensorFlow Lite)的兼容性问题;碎片化生态方面,不同厂商的 NPU 指令集和编译器存在差异,导致移植成本居高不下。

从发展趋势来看,随着 AI 模型复杂度提升,端侧 AI 芯片的算力会持续增强,同时维持低功耗状态。端侧 AI 芯片将支持多模态数据(如图像、语音、传感器数据)的融合处理,从而拓展更为丰富的应用场景。轻量化模型(如 MobileNet、EfficientNet)和神经架构搜索(NAS)技术将进一步优化端侧 AI 的性能。端侧 AI 芯片与云端 AI 的协同作业将成为主流模式,复杂任务交由云端处理,实时任务则由端侧设备完成。

总而言之,端侧 AI 芯片是推动 AI 技术在终端设备落地的核心硬件,其发展将对智能手机、智能穿戴、自动驾驶、工业物联网等众多领域产生深远影响。尽管目前面临一些挑战,但未来端侧 AI 芯片必将朝着更高算力、更低功耗、更强安全性以及更丰富应用场景的方向迈进。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI芯片
    +关注

    关注

    17

    文章

    2061

    浏览量

    36558
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    引领大模型落地!Firefly-RK182X 开发套件上线发售

    海量参数的大模型给AI行业带来颠覆性的体验,然而在设备中,由于有限的DRAM带宽、硬件算力、存储容量等瓶颈,让
    的头像 发表于 11-26 16:33 757次阅读
    引领<b class='flag-5'>端</b><b class='flag-5'>侧</b>大模型<b class='flag-5'>落地</b>!Firefly-RK182X 开发套件上线发售

    全志V861系列芯片推动AI视觉应用落地

    全志V861系列智能视觉处理芯片,以运力、算力双维减耗为核心设计理念,通过异构计算架构与AI-ISP硬件单元的深度协同,在保证高性能的同时显著优化系统资源消耗,同时形成最新低功耗解决方
    的头像 发表于 11-18 15:32 505次阅读
    全志V861系列<b class='flag-5'>芯片</b>推动<b class='flag-5'>端</b><b class='flag-5'>侧</b><b class='flag-5'>AI</b>视觉应用<b class='flag-5'>落地</b>

    半导体领域: AI 芯片成产业化核心引擎

    AI 芯片正以 “高能效比、场景化、全球化” 为核心方向加速演进,成为推动 AI 产业化
    的头像 发表于 10-10 18:01 5332次阅读

    此芯科技发布“合一”AI加速计划,赋能边缘与AI创新

    产品组合,覆盖从1.5B至32B参数规模的AI模型推理需求,满足工业、消费电子、智能终端等多样化场景的部署需求,推动
    的头像 发表于 09-15 11:53 2011次阅读
    此芯科技发布“合一”<b class='flag-5'>AI</b>加速计划,赋能边缘与<b class='flag-5'>端</b><b class='flag-5'>侧</b><b class='flag-5'>AI</b>创新

    AI推理赋能效率革命,美格智能多领域落地打造行业范本

    产业进阶:AI推理助手成为应用刚需作为人工智能技术最普遍的产品形式之一,“AI助手”已成为各类软件、
    的头像 发表于 08-25 17:06 3447次阅读
    <b class='flag-5'>端</b><b class='flag-5'>侧</b><b class='flag-5'>AI</b>推理赋能效率革命,美格<b class='flag-5'>智能</b>多领域<b class='flag-5'>落地</b>打造行业范本

    信而泰×DeepSeek:AI推理引擎驱动网络智能诊断迈向 “自愈”时代

    DeepSeek-R1:强大的AI推理引擎底座DeepSeek是由杭州深度求索人工智能基础技术研究有限公司开发的新一代AI大模型。其核心优势
    发表于 07-16 15:29

    RISC-V架构+Timesformer引擎:时擎科技自研算法赋能AI多场景落地

    引发了隐私安全的担忧。   与此同时,终端设备智能化升级的需求日益迫切,如智能耳机需具备本地语音识别能力,工业设备需实现实时缺陷检测等。这些需求共同推动了“云-边-”协同计算架构的普
    的头像 发表于 07-04 01:23 8717次阅读

    首创开源架构,天玑AI开发套件让AI模型接入得心应手

    AI巨头强强联手,势必为智能体化AI体验时代按下超级加速键。 AI终端的下一步是“普适智能”,而
    发表于 04-13 19:52

    炬芯科技探索AI技术与应用

    随着人工智能技术的迅猛发展,AI应用正从云端向终端迅速扩张。AI
    的头像 发表于 03-27 14:58 907次阅读

    AI大模型侧部署正当时:移远端AI大模型解决方案,激活场景智能新范式

    AI大模型解决方案备受瞩目,为AI设备的革新注入了澎湃动力。 万亿级市场蓝海显现,AI大模型加速落地
    发表于 03-27 11:26 417次阅读
    <b class='flag-5'>AI</b>大模型<b class='flag-5'>端</b>侧部署正当时:移远端<b class='flag-5'>侧</b><b class='flag-5'>AI</b>大模型解决方案,激活场景<b class='flag-5'>智能</b>新范式

    两大芯片厂商比拼AI音频芯片,高算力蓝牙6.0成亮点

    (电子发烧友网综合报道)随着人工智能技术的飞速发展,AI芯片作为其核心硬件支撑,正逐渐从云端向
    的头像 发表于 03-24 08:51 2752次阅读

    AI 音频处理器:集成音频处理与 AI 计算能力的创新芯片

    电子发烧友网综合报道: AI 音频处理器是专为智能物联网(AIoT)设备设计,集成了人工
    的头像 发表于 02-16 00:13 3033次阅读

    联发科技携手Cocos共建生成式AI游戏开发生态,推动行业升级

    捷更高效的应用开发体验,助力全球亿万用户享受全新的智能互动体验。 随着智能终端性能的不断提升,生成式
    的头像 发表于 01-10 09:24 712次阅读

    炬芯科技发布ATS323X系列AI音频芯片

    面向低延迟私有无线音频领域的创新之作:ATS323X系列芯片,这是全新一代基于MMSCIM的AI音频芯片,目前该
    的头像 发表于 12-12 14:58 1657次阅读

    广和通开启AI新时代

    AI发展正酣,随着终端芯片算力越来越高、模型能力越来越强、实时响应及隐私保护的
    的头像 发表于 12-12 10:35 1280次阅读