0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

能效提升3倍!异构计算架构让AI跑得更快更省电

Carol Li 来源:电子发烧友网 作者:李弯弯 2025-05-25 01:55 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

电子发烧友网报道(文/李弯弯)异构计算架构通过集成多种不同类型的处理单元(如CPUGPU、NPU、FPGADSP等),针对不同计算任务的特点进行分工协作,从而在性能、能效和灵活性之间实现最优平衡。它是应对复杂计算需求的关键技术之一。

异构计算架构的核心优势

异构计算架构的核心要素主要包括多种计算单元结合、任务分配机制和协同工作机制。多种计算单元结合:结合不同类型的处理单元,如CPU、GPU、TPU、FPGA等,每种单元针对特定任务或工作负载进行优化。例如CPU擅长处理逻辑判断、控制流程以及多样化的通用任务;GPU拥有大量并行处理单元,擅长图像、视频、深度学习等大规模数据运算;FPGA/ASIC可根据特定算法进行高度定制,在功耗和实时性方面有优势。

任务分配机制:通过将不同类型的处理单元分配给不同的任务,异构架构可以提高系统整体的能效比和性能,实现任务的并行处理和优化。系统会根据工作负载类型将任务分配给最适合的硬件单元,让整体资源得到最大程度的利用。

协同工作机制:异构计算并非让各个处理单元“各自为政”,而是需要一个良好的编程框架和通讯机制,保证不同单元之间的数据传递和任务调度高效有序。例如采用共享或专用高速缓存、高速互联接口、统一编程模型或驱动层抽象等方式。

异构计算的优势在于性能的提升、能效比优化、适应多样化需求,缩短开发周期。性能提升,通过利用多种优化的处理单元,异构架构可以显著提升系统的整体性能和响应速度。例如在深度学习任务中,GPU的并行计算能力能够显著加速模型训练,减少训练时间,从而在大规模数据集的处理上带来极大的性能提升。

能效比优化,针对不同类型的工作负载分配适当的处理单元,异构架构可以在相同功耗下提供更高的计算能力。例如CPU在处理计算密集型任务时效率较低,而GPU则能在这些任务中提供更高效的计算,进而减少能源消耗。同时,FPGA等硬件能够根据任务的需要进行定制,进一步优化性能与能效。

适应多样化需求,支持多种应用需求,从科学计算到深度学习,异构架构可以灵活调整以满足不同的计算和数据处理需求。

缩短开发周期,开发者可以利用现有硬件资源,根据任务需求快速选择合适的硬件加速方案,无需重新设计专用硬件系统。这不仅节省了开发时间,也降低了设计和开发的成本,从而加速了产品的推出。

异构计算架构的典型案例

下面是列举一些异构计算架构的典型案例,展示如何通过整合多种处理单元(CPU、GPU、NPU、FPGA等)实现性能、能效和灵活性的协同优化。

智能手机领域,如苹果M1 Ultra,该芯片包含CPU、GPU、NPU多个单元,8核(4性能核+4能效核)CPU处理通用任务,16核GPU加速图形渲染和机器学习推理,16核专用加速器NPU,支持实时影像处理(如电影模式视频分割)。

在协作方面,视频处理方面,CPU调度任务,GPU加速特效渲染,NPU实时分析人脸焦点。在能效优化方面,能效核处理后台任务,性能核专注高负载场景。相比传统SoC,M1 Ultra在AI任务(如实时语义分割)能效提升3倍,续航延长20%。

智能驾驶领域,如特斯拉HW4.0,该芯片架构包含GPU、NPU、FPGA单元,AMD定制GPU处理图形渲染和传感器融合,自研ASIC(Hardware 4.0)加速BEV(鸟瞰图)感知和路径规划,FPGA处理实时雷达信号滤波。

在协作方面,感知层方面,NPU并行处理8摄像头+雷达数据,输出目标检测结果;决策层方面,GPU模拟驾驶场景,CPU执行车辆控制指令。该架构设计具有明显成效,如延迟降低至20ms以下,支持纯视觉方案的FSD(Full Self-Driving)功能。

数据中心领域,如NVIDIA DGX H100,该芯片架构包含CPU、GPU、DPU单元,AMD EPYC Genoa处理I/O和系统管理,8块H100 GPU(NVLink互联)加速AI训练,BlueField-3DPU卸载网络和存储任务,释放GPU算力。在协作方面,训练阶段,GPU执行矩阵运算,DPU预处理数据(如压缩/解密);推理阶段,GPU+CPU协同处理低延迟请求(如实时推荐系统)。该架构的成效体现在,训练万亿参数模型效率提升90%,能效比达30 TFLOPS/W。

边缘计算领域,如谷歌Edge TPU,采用专用ASIC搭载协处理器,Edge TPU仅支持INT8量化模型,针对边缘推理优化,低功耗MCU(Cortex-M)管理传感器数据输入。在协作方面,预处理方面,MCU完成数据滤波和格式转换,在推理方面,Edge TPU执行MobileNet-SSD模型(物体检测),延迟<10ms。相比通用芯片,功耗降低75%,体积缩小50%。

小结:异构计算架构通过任务-硬件的精准匹配,在性能、功耗、成本等关键指标上实现突破,成为高性能计算、AI、边缘计算等领域的核心基础设施。未来,随着Chiplet、存算一体等技术的融合,异构计算将进一步释放硬件潜力,推动智能计算向更高能效、更低延迟发展。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    91

    文章

    41972

    浏览量

    303064
  • 架构
    +关注

    关注

    1

    文章

    537

    浏览量

    26664
  • 异构
    +关注

    关注

    0

    文章

    47

    浏览量

    13573
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    极客时间多 Agent 设计与工程化行动营

    做一个三天的项目,第二天它就忘了第一天干了什么。实战中我发现:短期记忆用向量数据库,长期记忆用图数据库,工作记忆用Redis缓存。 三层记忆架构Agent的连续任务能力提升了10
    发表于 05-18 17:05

    XC7Z020-2CLG484I 双核异构架构 全能型 SoC

    Zynq-7000 系列的核心型号,创新性地将双核 ARM Cortex-A9 处理器与 7 系列 FPGA 可编程逻辑深度集成,构建起 “软件可编程 + 硬件可定制” 的异构计算架构,为多领域智能设备提供了一体化
    发表于 02-28 23:37

    使用NORDIC AI的好处

    提升,适合音频、图像和高采样率传感器等更重的 AI 负载。[Axon NPU 技术页] 模型更小、更快
    发表于 01-31 23:16

    类脑计算突破:Neurofem算法AI芯片秒变数学天才,提升5

    电子发烧友网报道(文/吴子鹏)当大多数人还将类脑计算与图像识别、语音交互等AI应用绑定在一起时,美国桑迪亚国家实验室的一项最新研究,正彻底改写这一技术的边界。日前,科技媒体Phys.org报道称,该
    的头像 发表于 01-15 09:32 1990次阅读

    北大团队最新研究:AI芯片算力提升数倍,提升超90

    首次实现后摩尔新器件异质集成的多物理域融合傅里叶变换系统。   这一全新计算架构将傅里叶变换计算速度从当前每秒约1300亿次提升至每秒约5000亿次,算力
    的头像 发表于 01-15 09:31 2361次阅读

    IBM Rhapsody AI 助手:系统工程智能

    IBM Rhapsody AI 能力的加入,标志着系统工程正逐步迈入智能化新阶段。它模型不再只是“被动表达设计意图”的工具,而成为理解、推理、
    的头像 发表于 01-06 11:34 501次阅读
    IBM Rhapsody <b class='flag-5'>AI</b> 助手:<b class='flag-5'>让</b>系统工程<b class='flag-5'>更</b>智能

    重磅合作!Quintauris 联手 SiFive,加速 RISC-V 在嵌入式与 AI 领域落地

    之后,要打造的是高可靠性、高能还支持可扩展的 RISC-V 设计方案。而且合作的核心目标特别明确: RISC-V 处理器在嵌入式、物联网、AI 系统里更快普及; 用集成式 IP
    发表于 12-18 12:01

    亚马逊发布新一代AI芯片Trainium3,性能提升4

    Trainium 4的开发计划。亚马逊表示,这款芯片能够比英伟达市场领先的图形处理单元(GPU)更便宜、更高效地驱动AI模型背后的密集计算。     作为亚马逊首款3纳米工艺AI芯片,
    的头像 发表于 12-09 08:37 9018次阅读
    亚马逊发布新一代<b class='flag-5'>AI</b>芯片Trainium<b class='flag-5'>3</b>,性能<b class='flag-5'>提升</b>4<b class='flag-5'>倍</b>

    安谋科技发布“星辰”STAR-MC3提升MCU AI处理能力

    Helium™技术,显著提升CPU在AI计算方面的性能,同时兼具优异的面比与比,实现高性
    的头像 发表于 09-29 08:53 1.1w次阅读
    安谋科技发布“星辰”STAR-MC<b class='flag-5'>3</b>,<b class='flag-5'>提升</b>MCU <b class='flag-5'>AI</b>处理能力

    PCIe协议分析仪测试哪些设备?

    PCIe协议分析仪测试多种依赖PCIe总线进行高速数据传输的设备,其测试范围覆盖计算、存储、网络及异构计算等多个领域,具体设备类型及测试场景如下:一、核心计算设备 GPU(图形处理器
    发表于 07-25 14:09

    【「DeepSeek 核心技术揭秘」阅读体验】第三章:探索 DeepSeek - V3 技术架构的奥秘

    数据中挖掘有价值信息,这也我意识到架构设计对模型性能起着根本性作用,是 AI 具备强大能力的 “骨骼” 支撑。 二、流水线并行 书中关于流水线并行的内容,展现了提升
    发表于 07-20 15:07

    异构计算构建智能、更高效的AI未来

    人工智能 (AI) 不再只是一个科研课题,它已然成为我们日常生活的一部分。从个性化医疗、智能可穿戴设备,到沉浸式数字娱乐以及自主机器人,AI 正在重塑我们生活、工作和创新的方式。然而,随着 AI 应用日益复杂,底层的基础设施也必
    的头像 发表于 06-26 09:44 1267次阅读

    PTR54H20核心架构与特性

    PTR54H20是一款基于Nordic nRF54H20芯片的超低功耗蓝牙6.0模块,采用22nm制程工艺,集成五核异构计算架构:双Arm Cortex-M33处理器(主频320MHz)、双
    发表于 06-25 09:57

    异构计算解决方案(兼容不同硬件架构

    异构计算解决方案通过整合不同类型处理器(如CPU、GPU、NPU、FPGA等),实现硬件资源的高效协同与兼容,满足多样化计算需求。其核心技术与实践方案如下: 一、硬件架构设计 异构处理
    的头像 发表于 06-23 07:40 1142次阅读

    如何释放异构计算的潜能?Imagination与Baya Systems的系统架构实践启示

    报告作者:PallaviSharma,Imaginaiton产品管理总监Dr.EricNorige,BayaSystems首席软件架构师关注Imagination公众号,消息框发送【异构计算】,即可
    的头像 发表于 06-13 08:33 1499次阅读
    如何释放<b class='flag-5'>异构计算</b>的潜能?Imagination与Baya Systems的系统<b class='flag-5'>架构</b>实践启示