0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

异构+Chiplet—通往数据中心的能效之路

奇异摩尔 来源:奇异摩尔 2023-06-21 15:50 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

随着以大模型为代表的AIGC迅速崛起,数据到算力需求的持续暴涨,为数据中心带来了巨大的考验。为填补算力鸿沟,下一代数据中心必须要具备更高的算力密度、更大的网络规模,并能够灵活地部署和更新海量新应用。

在这一轮新的技术方向中,异构计算架构和Chiplet技术因能有效提升复杂场景计算效率,算力密度和网络规模,被普遍视为通往数据中心未来的能效之路。

AIGC或将撕开数据中心算力缺口

在AI大模型飞速发展之下,单个大语言训练驱动AI训练服务器需求约2亿美元,AI推理服务器方面,如ChatGPT在初期便可带动推理服务器需求约45亿美元。

据中国信通院,2021年国内IDC市场规模1500.2亿元,同比增长28.5%。据信通院预计,随着我国各地区、各行业数字化转型深入推进、AI训练需求持续增长、智能终端实时计算需求增长,2022年国内市场规模将达1900.7亿元,同增26.7%。

算力作为大模型的核心引擎,计算方式简单粗暴,即实际拥有多少的GPU芯片,将直接决定其算力的大小。以ChatGPT为例,其模型计算主要基于微软的Azure云服务进行,本质上是借助微软自有的IDC资源,在云端完成计算过程后,再将结果返回给OpenAI。

AIGC所需的算力不是固定的,而是逐次递增的。数据中心是承接AI计算需求的直接形式,其算力需求为AIGC的能力所驱动,也就是AIGC越聪明,其背后所需要的算力就越多,而供需双方存在的现实差距,则让数据中心的算力缺口变得愈加严重。

互联网厂商布局ChatGPT同类产品,或将加大核心城市IDC算力供给缺口。艾瑞咨询数据显示,2021年国内IDC行业下游客户占比中,互联网厂商居首位,占比为60%,国内核心城市IDC算力供给缺口或将加大。

AIGC时代,智能算力崛起

随着人工智能进入新的发展周期,以及大模型的兴起,传统的芯片需求结构发生了变化。尽管总体算力仍在增长,但通用计算力由CPU主导的比例正在下降,而智能计算力由GPU主导的比例逐渐增加。

目前,GPU在AI芯片市场的占比约为90%。根据VMR的数据,2021年全球GPU行业市场规模为334.7亿美元,随着大型模型训练的成熟,预计到2030年将达到4773.7亿美元,年均增长率为34.35%。

新华三集团副总裁、计算存储产品线总裁徐润安在接受媒体采访时表示,智能算力占比变大原因在于,x86架构CPU单核性能强、通用性好。但AI场景需要多核、高并发、高带宽芯片。综合考虑成本、效率,GPU、DPU、NPU通常表现更好。CPU部分职能被其他专用芯片分担。在他看来,大模型会带来巨大的智能算力消耗。

Chiplet:破局数据中心未来

近20年中,单一的制程微缩已被证明无法赶上对性能需求的步伐。尤其是在数据中心,情况远比客户端产品更为复杂,一个非常典型的情况是多个客户端在同一产品上运行工作负载,如多核CPU或GPU。于是,人们开始将未来依托在将计算单元、内存等和其他模块成在同一封装上的Chiplet异构集成路线之上。

Chiplet架构对于服务器处理器而言意义非凡,大大降低了处理器的开发门槛和成本,起到了巨大的推动作用。正如AMD开创性的chiplet产品所证明的那样,转向chiplet技术可以显著改善数据中心的计算成本,并提高互连效率。迄今,全球主流服务器芯片厂商都开始将chiplet纳入自身产品的主要路径之一。

就此,英特尔 IO 技术解决方案团队战略家Kurt Lender 总结了 chiplet 技术的影响“有合理的预期,未来 10 年的 HPC 采购将利用 chiplet 技术更好地支持他们的科学工作负载。” AMD 的 CEO Lisa Su也表现出了同样的期待,当被问及她是否认为未来 10 年的 HPC 采购指定定制chiplet设计的计算芯片而不是现成的商品时,她回答“是”。

Kurt Lender 表示,创建基于 UCIe 的chiplet 设计在成本方面具有显著的优势,“有各种纵向扩展和横向扩展的成本优势,包括由于与单片硅设计相比占地面积更小而导致chiplet的高良率而节省的成本,以及能够指定可以利用 HPC 冷却功能的高密度、高功率封装。在其最完整的表达中,基于chiplet 的架构使设计人员能够将来自多个供应商的 IP 和不同职称工艺技术的芯粒快速集成到一个封装中。”

关于随着以大模型为代表的人工智能大规模计算的迅速崛起,数据中心的算力难题不断加剧。而异构和Chiplet会将数据中心的未来引向何处,还让我们拭目以待。‍‍‍‍‍‍‍




审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • GPU芯片
    +关注

    关注

    1

    文章

    307

    浏览量

    6553
  • OpenAI
    +关注

    关注

    9

    文章

    1249

    浏览量

    10272
  • chiplet
    +关注

    关注

    6

    文章

    499

    浏览量

    13645
  • 奇异摩尔
    +关注

    关注

    0

    文章

    85

    浏览量

    4073
  • ChatGPT
    +关注

    关注

    31

    文章

    1600

    浏览量

    10391
  • 先进封装
    +关注

    关注

    2

    文章

    562

    浏览量

    1062
  • 芯粒
    +关注

    关注

    1

    文章

    88

    浏览量

    450

原文标题:异构+Chiplet,通往数据中心的能效之路

文章出处:【微信号:奇异摩尔,微信公众号:奇异摩尔】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    斯丹电子 | 数据中心传感器应用工程指南

    数据中心的冷却、安全防护、供电与优化。传感器如何赋高能数据中心?一本工程指南讲清楚:
    发表于 04-20 14:58 0次下载

    青智ZW3432B1数据中心电源管理系统监控方案

    人机界面,实时监测末端服务器的用情况和电能质量数据,从而实现对整个配电系统的实时监控。同时可实现配电精细的分析,为配电网络和服务器运行
    的头像 发表于 03-24 17:29 569次阅读
    青智ZW3432B1<b class='flag-5'>数据中心</b>电源管理系统监控方案

    数据中心电站远程监控管理系统方案

    在全球数字经济与绿色能源转型的双重驱动下,数据中心作为算力基础设施的核心,其供电安全与管理日益成为关键议题。储电站作为数据中心电力保障
    的头像 发表于 02-11 15:11 318次阅读
    <b class='flag-5'>数据中心</b>储<b class='flag-5'>能</b>电站远程监控管理系统方案

    1分钟带你了解数据中心供电架构 #电子元器件 #数据中心 #供电架构

    数据中心
    沛城芯动力
    发布于 :2026年02月03日 15:39:04

    安森美多系列功率器件产品助力突破AI数据中心瓶颈

    随着 AI 算力需求的爆发式增长,数据中心正面临功率密度激增、能耗加剧及行业效率标准日趋严苛的多重考验。作为功率器件领域的领导厂商,安森美(onsemi)如何助力客户突破瓶颈,以下通过安森美专家的核心回复,快速聚焦公司的技术
    的头像 发表于 01-24 17:04 2393次阅读

    安科瑞多回路电表对工业提升的计划与数据中心分级计量指南

    1、概述 到2025 年,工业行业提升,数据中心等领域明显提升,绿色低碳能源利用比例显著提高,节能提
    的头像 发表于 01-23 16:46 705次阅读

    新思科技ZeBu助力富士通数据中心创新

    全球企业和政府正积极寻求解决方案,应对数据中心能耗迅速增长问题,开发下一代“绿色”数据中心——既具备高性能,又兼具高能的设施。全球科技巨头富士通在先进处理器开发领域已领先 60 年,致力于开发更节能、更可持续的
    的头像 发表于 12-17 10:26 840次阅读

    氮化硼TIM材料解决AI数据中心困境 | 晟鹏科技

    AI算力爆发的“热情”与困境人工智能技术的飞速发展推动全球进入智能算力时代。ChatGPT、Sora等大模型的广泛应用,使得数据中心的计算需求呈指数级增长。单个AI训练服务器的功率密度已突破千瓦
    的头像 发表于 09-22 07:30 1027次阅读
    氮化硼TIM材料解决AI<b class='flag-5'>数据中心</b>的<b class='flag-5'>能</b><b class='flag-5'>效</b>困境 | 晟鹏科技

    金升阳如何破解数据中心供电难题

    数据中心的庞大能耗版图中,服务器作为核心业务载体,其电力消耗占比突出且对供电稳定性、持续性有着极高要求。而电源作为能源转换的关键零部件,其表现直接决定着数据中心的能源利用效率。
    的头像 发表于 09-01 14:42 1114次阅读
    金升阳如何破解<b class='flag-5'>数据中心</b>供电难题

    氮化硼有“凉”方,解决AI数据中心困境 | 晟鹏科技

    AI算力爆发的“热情”与困境人工智能技术的飞速发展推动全球进入智能算力时代。ChatGPT、Sora等大模型的广泛应用,使得数据中心的计算需求呈指数级增长。单个AI训练服务器的功率密度已突破千瓦
    的头像 发表于 08-26 09:42 1376次阅读
    氮化硼有“凉”方,解决AI<b class='flag-5'>数据中心</b>的<b class='flag-5'>能</b><b class='flag-5'>效</b>困境 | 晟鹏科技

    施耐德电气SmartCool助力数据中心升级

    某能源供应企业的数据中心,生产级别、最高安全要求的机房,承担着多省核心业务命脉,这里停电1分钟,意味着多省业务同时陷入瘫痪,“高安全,强监管”为其守住了“安全红线”,也为其带来了“不容试错”的挑战。
    的头像 发表于 07-30 09:41 827次阅读

    简单认识安森美AI数据中心电源解决方案

    面对AI算力需求爆发式增长,数据中心电力系统正面临前所未有的挑战。安森美(onsemi)推出的AI数据中心电源解决方案,直击、尺寸等痛点,助力客户把握
    的头像 发表于 07-05 13:03 3741次阅读
    简单认识安森美AI<b class='flag-5'>数据中心</b>电源解决方案

    西门子G120XA变频器:数据中心革命的核心引擎

    在数字经济爆发式增长的今天,数据中心已成为支撑社会运转的"数字心脏"。然而,其庞大的能耗需求与绿色低碳目标之间的矛盾日益凸显——尤其是冷却系统作为数据中心第二大能耗单元(占比约35%),正成为
    的头像 发表于 07-03 17:44 1258次阅读
    西门子G120XA变频器:<b class='flag-5'>数据中心</b><b class='flag-5'>能</b><b class='flag-5'>效</b>革命的核心引擎

    曙光数创SLiquid智能运维系统解决数据中心运维难题

    面对数字时代的海量需求,传统数据中心正遭遇系统性挑战:告警风暴引发的故障定位迟滞、困局导致的PUE优化瓶颈、资产迷雾造成的资源错配、容量盲区引发的规划失焦。这些问题严重阻碍了数据中心
    的头像 发表于 06-03 10:21 1118次阅读

    数据中心机房供配电体系构建与智慧管控方案

    个交叉的系统,涉及到市电供电、防雷接地、防静电、UPS不间断供电、柴油发电机等,每个系统互相交叉,互有影响,这就使我们在设计时必须考虑多方面的因素。本文从数据中心的高压供电系统到末端精密配电系统介绍数据中心供配电及
    的头像 发表于 05-14 14:52 1229次阅读
    <b class='flag-5'>数据中心</b>机房供配电体系构建与<b class='flag-5'>能</b><b class='flag-5'>效</b>智慧管控方案