0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

异构+Chiplet—通往数据中心的能效之路

奇异摩尔 来源:奇异摩尔 2023-06-21 15:50 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

随着以大模型为代表的AIGC迅速崛起,数据到算力需求的持续暴涨,为数据中心带来了巨大的考验。为填补算力鸿沟,下一代数据中心必须要具备更高的算力密度、更大的网络规模,并能够灵活地部署和更新海量新应用。

在这一轮新的技术方向中,异构计算架构和Chiplet技术因能有效提升复杂场景计算效率,算力密度和网络规模,被普遍视为通往数据中心未来的能效之路。

AIGC或将撕开数据中心算力缺口

在AI大模型飞速发展之下,单个大语言训练驱动AI训练服务器需求约2亿美元,AI推理服务器方面,如ChatGPT在初期便可带动推理服务器需求约45亿美元。

据中国信通院,2021年国内IDC市场规模1500.2亿元,同比增长28.5%。据信通院预计,随着我国各地区、各行业数字化转型深入推进、AI训练需求持续增长、智能终端实时计算需求增长,2022年国内市场规模将达1900.7亿元,同增26.7%。

算力作为大模型的核心引擎,计算方式简单粗暴,即实际拥有多少的GPU芯片,将直接决定其算力的大小。以ChatGPT为例,其模型计算主要基于微软的Azure云服务进行,本质上是借助微软自有的IDC资源,在云端完成计算过程后,再将结果返回给OpenAI。

AIGC所需的算力不是固定的,而是逐次递增的。数据中心是承接AI计算需求的直接形式,其算力需求为AIGC的能力所驱动,也就是AIGC越聪明,其背后所需要的算力就越多,而供需双方存在的现实差距,则让数据中心的算力缺口变得愈加严重。

互联网厂商布局ChatGPT同类产品,或将加大核心城市IDC算力供给缺口。艾瑞咨询数据显示,2021年国内IDC行业下游客户占比中,互联网厂商居首位,占比为60%,国内核心城市IDC算力供给缺口或将加大。

AIGC时代,智能算力崛起

随着人工智能进入新的发展周期,以及大模型的兴起,传统的芯片需求结构发生了变化。尽管总体算力仍在增长,但通用计算力由CPU主导的比例正在下降,而智能计算力由GPU主导的比例逐渐增加。

目前,GPU在AI芯片市场的占比约为90%。根据VMR的数据,2021年全球GPU行业市场规模为334.7亿美元,随着大型模型训练的成熟,预计到2030年将达到4773.7亿美元,年均增长率为34.35%。

新华三集团副总裁、计算存储产品线总裁徐润安在接受媒体采访时表示,智能算力占比变大原因在于,x86架构CPU单核性能强、通用性好。但AI场景需要多核、高并发、高带宽芯片。综合考虑成本、效率,GPU、DPU、NPU通常表现更好。CPU部分职能被其他专用芯片分担。在他看来,大模型会带来巨大的智能算力消耗。

Chiplet:破局数据中心未来

近20年中,单一的制程微缩已被证明无法赶上对性能需求的步伐。尤其是在数据中心,情况远比客户端产品更为复杂,一个非常典型的情况是多个客户端在同一产品上运行工作负载,如多核CPU或GPU。于是,人们开始将未来依托在将计算单元、内存等和其他模块成在同一封装上的Chiplet异构集成路线之上。

Chiplet架构对于服务器处理器而言意义非凡,大大降低了处理器的开发门槛和成本,起到了巨大的推动作用。正如AMD开创性的chiplet产品所证明的那样,转向chiplet技术可以显著改善数据中心的计算成本,并提高互连效率。迄今,全球主流服务器芯片厂商都开始将chiplet纳入自身产品的主要路径之一。

就此,英特尔 IO 技术解决方案团队战略家Kurt Lender 总结了 chiplet 技术的影响“有合理的预期,未来 10 年的 HPC 采购将利用 chiplet 技术更好地支持他们的科学工作负载。” AMD 的 CEO Lisa Su也表现出了同样的期待,当被问及她是否认为未来 10 年的 HPC 采购指定定制chiplet设计的计算芯片而不是现成的商品时,她回答“是”。

Kurt Lender 表示,创建基于 UCIe 的chiplet 设计在成本方面具有显著的优势,“有各种纵向扩展和横向扩展的成本优势,包括由于与单片硅设计相比占地面积更小而导致chiplet的高良率而节省的成本,以及能够指定可以利用 HPC 冷却功能的高密度、高功率封装。在其最完整的表达中,基于chiplet 的架构使设计人员能够将来自多个供应商的 IP 和不同职称工艺技术的芯粒快速集成到一个封装中。”

关于随着以大模型为代表的人工智能大规模计算的迅速崛起,数据中心的算力难题不断加剧。而异构和Chiplet会将数据中心的未来引向何处,还让我们拭目以待。‍‍‍‍‍‍‍




审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • GPU芯片
    +关注

    关注

    1

    文章

    306

    浏览量

    6403
  • OpenAI
    +关注

    关注

    9

    文章

    1238

    浏览量

    9817
  • chiplet
    +关注

    关注

    6

    文章

    482

    浏览量

    13505
  • 奇异摩尔
    +关注

    关注

    0

    文章

    73

    浏览量

    3980
  • ChatGPT
    +关注

    关注

    31

    文章

    1596

    浏览量

    10077
  • 先进封装
    +关注

    关注

    2

    文章

    521

    浏览量

    973
  • 芯粒
    +关注

    关注

    0

    文章

    81

    浏览量

    395

原文标题:异构+Chiplet,通往数据中心的能效之路

文章出处:【微信号:奇异摩尔,微信公众号:奇异摩尔】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    氮化硼TIM材料解决AI数据中心困境 | 晟鹏科技

    AI算力爆发的“热情”与困境人工智能技术的飞速发展推动全球进入智能算力时代。ChatGPT、Sora等大模型的广泛应用,使得数据中心的计算需求呈指数级增长。单个AI训练服务器的功率密度已突破千瓦
    的头像 发表于 09-22 07:30 568次阅读
    氮化硼TIM材料解决AI<b class='flag-5'>数据中心</b>的<b class='flag-5'>能</b><b class='flag-5'>效</b>困境 | 晟鹏科技

    金升阳如何破解数据中心供电难题

    数据中心的庞大能耗版图中,服务器作为核心业务载体,其电力消耗占比突出且对供电稳定性、持续性有着极高要求。而电源作为能源转换的关键零部件,其表现直接决定着数据中心的能源利用效率。
    的头像 发表于 09-01 14:42 772次阅读
    金升阳如何破解<b class='flag-5'>数据中心</b>供电难题

    氮化硼有“凉”方,解决AI数据中心困境 | 晟鹏科技

    AI算力爆发的“热情”与困境人工智能技术的飞速发展推动全球进入智能算力时代。ChatGPT、Sora等大模型的广泛应用,使得数据中心的计算需求呈指数级增长。单个AI训练服务器的功率密度已突破千瓦
    的头像 发表于 08-26 09:42 912次阅读
    氮化硼有“凉”方,解决AI<b class='flag-5'>数据中心</b>的<b class='flag-5'>能</b><b class='flag-5'>效</b>困境 | 晟鹏科技

    施耐德电气SmartCool助力数据中心升级

    某能源供应企业的数据中心,生产级别、最高安全要求的机房,承担着多省核心业务命脉,这里停电1分钟,意味着多省业务同时陷入瘫痪,“高安全,强监管”为其守住了“安全红线”,也为其带来了“不容试错”的挑战。
    的头像 发表于 07-30 09:41 528次阅读

    简单认识安森美AI数据中心电源解决方案

    面对AI算力需求爆发式增长,数据中心电力系统正面临前所未有的挑战。安森美(onsemi)推出的AI数据中心电源解决方案,直击、尺寸等痛点,助力客户把握
    的头像 发表于 07-05 13:03 3132次阅读
    简单认识安森美AI<b class='flag-5'>数据中心</b>电源解决方案

    西门子G120XA变频器:数据中心革命的核心引擎

    在数字经济爆发式增长的今天,数据中心已成为支撑社会运转的"数字心脏"。然而,其庞大的能耗需求与绿色低碳目标之间的矛盾日益凸显——尤其是冷却系统作为数据中心第二大能耗单元(占比约35%),正成为
    的头像 发表于 07-03 17:44 779次阅读
    西门子G120XA变频器:<b class='flag-5'>数据中心</b><b class='flag-5'>能</b><b class='flag-5'>效</b>革命的核心引擎

    曙光数创SLiquid智能运维系统解决数据中心运维难题

    面对数字时代的海量需求,传统数据中心正遭遇系统性挑战:告警风暴引发的故障定位迟滞、困局导致的PUE优化瓶颈、资产迷雾造成的资源错配、容量盲区引发的规划失焦。这些问题严重阻碍了数据中心
    的头像 发表于 06-03 10:21 804次阅读

    数据中心机房供配电体系构建与智慧管控方案

    个交叉的系统,涉及到市电供电、防雷接地、防静电、UPS不间断供电、柴油发电机等,每个系统互相交叉,互有影响,这就使我们在设计时必须考虑多方面的因素。本文从数据中心的高压供电系统到末端精密配电系统介绍数据中心供配电及
    的头像 发表于 05-14 14:52 813次阅读
    <b class='flag-5'>数据中心</b>机房供配电体系构建与<b class='flag-5'>能</b><b class='flag-5'>效</b>智慧管控方案

    如何破解数据中心难题?该方案提供创新策略

    ,占总能耗的 86% 左右,但传统管理手段难以追踪实时。高昂的能源消耗不仅增加了运营成本,也给能源供应带来了巨大压力。 政策法规推动:       2021 年 10 月,《数据中心
    的头像 发表于 04-14 11:38 714次阅读
    如何破解<b class='flag-5'>数据中心</b><b class='flag-5'>能</b><b class='flag-5'>效</b>难题?该方案提供创新策略

    数据中心困局怎么解?安科瑞电气提供解决方案

    非常复杂,能源密度大,容易引发火灾等安全问,需要采取安全用电监测,以确保供电系统不受非授权人员干扰。 3、精细管理 数据中心能源消耗大,PUE压力大,电费成本高,通过搭建能源计量体系,可以实现精细化管理,提升PUE。 4、高
    的头像 发表于 04-01 14:01 609次阅读
    <b class='flag-5'>数据中心</b><b class='flag-5'>能</b><b class='flag-5'>效</b>困局怎么解?安科瑞电气提供解决方案

    数据中心困局怎么解?这份方案给出妙方

    数据中心困局怎么解?这份方案给出妙方
    的头像 发表于 03-14 08:05 408次阅读
    <b class='flag-5'>数据中心</b><b class='flag-5'>能</b><b class='flag-5'>效</b>困局怎么解?这份方案给出妙方

    解锁数据中心效能密码:一站式综合管理方案

    解锁数据中心效能密码:一站式综合管理方案
    的头像 发表于 03-08 08:13 484次阅读
    解锁<b class='flag-5'>数据中心</b>效能密码:一站式综合<b class='flag-5'>能</b><b class='flag-5'>效</b>管理方案

    数据中心发展与改造

    全球多数数据中心基础设施已超六年,能耗高而效率低。随着AI的发展,企业正致力于整合与提升的现代化改造。同时数据中心呈现规模化、高密化、绿色化发展趋势。19821800313 一、目
    的头像 发表于 02-28 16:50 744次阅读
    <b class='flag-5'>数据中心</b>发展与改造

    安科瑞:以综合管理解决方案,赋能人工智能时代的数据中心可持续发展

    在人工智能与可持续发展的双重浪潮下,安科瑞凭借其综合管理解决方案,不仅为数据中心行业提供了降本增效的实践路径,更推动了全球数字基础设施向绿色低碳转型。未来,随着技术的持续迭代与生态合作的深化,安科瑞有望成为AI时代
    的头像 发表于 02-21 15:37 812次阅读
    安科瑞:以综合<b class='flag-5'>能</b><b class='flag-5'>效</b>管理解决方案,赋能人工智能时代的<b class='flag-5'>数据中心</b>可持续发展

    从高能耗到低碳化:数据中心的绿色转型之路

    ,推动数据中心的绿色发展,不仅是企业社会责任的体现,更是实现全球碳中和目标的必然选择。 面临的问题 1.能耗限额,PUE要求越来越严格 为深入贯彻落实党中央、国务院重大决策部署,进一步提高工业领域能源利用效率,推动优化能源资
    的头像 发表于 02-18 17:39 903次阅读
    从高能耗到低碳化:<b class='flag-5'>数据中心</b>的绿色转型<b class='flag-5'>之路</b>