0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

人工智能正在引领数据中心物理基础设施的新时代

易飞扬通信 来源:易飞扬通信 作者:易飞扬通信 2023-12-22 11:06 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

人工智能AI)目前正在对数据中心行业产生深远影响,这种影响可归因于OpenAI在2022年底推出的ChatGPT,该产品因其对查询提供复杂且类似人类的响应的卓越能力而迅速受到欢迎。因此,作为人工智能技术的一个子集,生成式人工智能成为2023年上半年行业活动、财报和供应商生态系统讨论的焦点。这种兴奋是有道理的,因为生成式人工智能已经引起了数十场讨论。数十亿美元的投资,预计到2027年将继续让数据中心资本支出提高到5000亿美元以上。然而,由于训练和部署支持生成式人工智能应用程序的大型语言模型(LLM)所需的计算能力显着扩展,因此需要对数据中心的架构进行更改。

虽然支持此类人工智能应用所需的硬件对许多人来说都是新的,但一部分数据中心行业已经部署此类基础设施多年。该领域通常被称为高性能计算 (HPC) 或超级计算行业。从历史上看,这个细分市场主要得到政府和高等教育机构的支持,以部署一些世界上最复杂和精密的计算机系统。

生成式人工智能正在做的事情是,将人工智能应用程序和支持它们的基础设施扩展到更广泛的企业和服务提供商市场。向HPC行业学习让我们了解基础设施可能会是什么样子。

wKgZomWE_TiAN5EFAAEE3Hrx74M773.png


图 1:AI硬件影响

人工智能基础设施需要更多的电力和液冷设施

总结图 1 所示的影响,人工智能工作负载将需要更多的计算能力和更高的网络速度。这将导致更高的机架功率密度,这对数据中心物理基础设施(DCPI)具有重大影响。对于电力基础设施(也称为灰色空间),预计架构变化将受到限制。AI工作负载应该会增加对备用电源(UPS)和IT机架(机柜PDU和母线槽)配电的需求,但不会要求任何重大的技术变革。人工智能基础设施将对DCPI产生变革性影响的地方在于数据中心的空白区域。

首先,由于AI IT硬件的功耗较高,需要更高功率的机架式PDU。在这些额定功率下,发生潜在故障或效率低下相关造成的成本可能很高。预计这将推动最终用户采用智能机架PDU,并能够远程监控和管理功耗和环境因素。这些机架PDU的成本比基本机架PDU高出许多数量级,而最终用户无法监控或管理其机架配电。

对于数据中心架构来说,更具变革性的是需要液体冷却来管理下一代CPUGPU运行AI工作负载时产生的更高热负载。液体冷却(包括直接液体冷却和浸没式冷却)在更广泛的数据中心行业中的采用不断增加,预计随着人工智能基础设施的部署而加速。然而,考虑到采用液冷的的跑道历史漫长,Dell’Oro预计生成式人工智能对液冷的影响在短期内将受到限制。仍然可以部署采用风冷技术的当前一代IT基础设施,但会牺牲硬件利用率和效率。

wKgaomWE_TmAWrj2AAJ89sJx6C4131.png

为了应对这一挑战,一些最终用户正在使用闭环空气辅助液冷系统改造其现有设施。这种基础设施可以是后门热交换器(RDHx)或直接液体冷却的一种形式,其利用液体来捕获机架或服务器内产生的热量,并在机架或服务器的后部将其排出,将其引导到热通道中。这种设计使数据中心运营商能够利用液冷的一些优势,而无需大量投资来重新设计设施。然而,为了大规模实现人工智能硬件的预期效率,需要专门建造的液冷设施。预计当前对液冷的兴趣将在2025年开始在部署中体现出来,预计到2027年液冷收入将接近20亿美元。

wKgZomWE_TqAYO2mAADf3EBqUBw873.png

电力可用性可能颠覆人工智能的炒作

将人工智能工作负载纳入未来数据中心建设的计划已经实现。这是Dell’Oro上调数据中心物理基础设施市场5年前景的主要原因,目前预计到2027年收入将以10%的复合年增长率增长。但是,尽管人工智能工作负载预计将为数据中心行业带来巨大的市场增长,但仍有一些值得注意的因素可能会减缓这种增长。新冠加速了数字化的步伐,掀起了新数据中心建设的浪潮。然而,随着需求的实现,供应链难以跟上,导致数据中心物理基础设施的交付时间在高峰时超过一年。现在,随着供应链限制的缓解,DCPI供应商正在解决积压问题,并开始缩短交货时间。

然而,对人工智能工作负载的需求正在形成数据中心行业的另一波增长浪潮。这种双倍增长导致数据中心行业不断增长的能源需求与公用事业公司向所需地点供电的速度之间存在差异。因此,这导致数据中心服务提供商探索“自带电源”模式作为潜在的解决方案。虽然该模型的可行性仍在确定中,但数据中心提供商渴望一种创新方法来支持其长期增长战略,而人工智能工作负载的激增是一个核心驱动力。

随着对更多DCPI的需求与可用功率的平衡,有一点是明确的:人工智能正在开创DCPI的新时代。在这个时代,DCPI不仅将在促进数据中心发展方面发挥关键作用,还将定义性能、成本并帮助实现可持续发展。这与DCPI所扮演的历史角色截然不同,特别是与近十年前的行业相比,当时DCPI几乎是事后才想到的。

随着AI增长浪潮的迅速到来,在AI策略中满足DCPI要求至关重要。如果不这样做,可能会导致AI IT硬件无处可插。

参考文献:

AI is Ushering in a New Era for Data Center Physical Infrastructure - Lucas Beran joined Dell’Oro Group


审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 数据中心
    +关注

    关注

    18

    文章

    5756

    浏览量

    75195
  • AI
    AI
    +关注

    关注

    91

    文章

    40982

    浏览量

    302533
  • 人工智能
    +关注

    关注

    1819

    文章

    50298

    浏览量

    266843
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    为何CPU是AI基础设施的核心

    人工智能 (AI) 并非一种具有单一理想基础设施的单一工作负载。AI 涵盖了多样化的工作负载,需要系统层面的协同策略,才能高效且可扩展地提供性能。而在这一策略中,CPU 扮演着核心角色,它作为系统的智能层,统筹协调云端、
    的头像 发表于 03-11 10:35 1277次阅读

    人工智能时代的精密脉搏

    当今时代,全球工业格局在科技浪潮的持续涤荡下加速重塑,工业革命作为重塑进程中的关键“催化剂”,已然历经数次迭代。聚焦于数据中心领域,自OpenAI发布后,AI智能训练需求呈指数级攀升,推动基础
    的头像 发表于 01-19 09:12 577次阅读
    <b class='flag-5'>人工智能</b><b class='flag-5'>时代</b>的精密脉搏

    数据中心发展的三大驱动力

    “新基建”的大背景下,数据中心行业发展迅猛。数据中心是数字经济时代的数字银行和数据资源库,新兴产业的未来发展,数据中心是核心
    的头像 发表于 12-26 10:34 511次阅读

    人工智能数据中心的光纤布线策略

    随着人工智能(AI)技术的飞速发展,数据中心的光纤布线策略正面临前所未有的挑战和机遇。AI的高带宽需求、低延迟要求以及大规模并行计算的特点,对数据中心的光纤布线提出了更高的要求。本文将从多个方面探讨
    的头像 发表于 11-21 10:21 580次阅读

    AI数据中心供电系统的发展现状和未来趋势

    AI数据中心作为数字时代的核心基础设施,承担着海量数据的存储、处理和传输任务,而供电系统是其稳定运行的“生命线”。随着云计算、大数据
    的头像 发表于 09-24 17:07 4232次阅读
    AI<b class='flag-5'>数据中心</b>供电系统的发展现状和未来趋势

    华为成功举行数据中心基础设施峰会

    行业智能化,共同探讨数智基础设施在绿色低碳的新技术、新实践。华为数字能源还展示了绿色低碳全场景数字能源解决方案及成功案例,与业界携手智赢AI时代,共筑高质量安全可靠数据中心
    的头像 发表于 09-20 10:01 1553次阅读

    赋能人工智能未来:ADI宣布支持800 VDC数据中心架构

    , Inc. (ADI)推出创新解决方案,为数据中心下一代800 VDC架构提供有力支持。该系列解决方案包含高可靠性热插拔与一级电源产品,旨在实现安全、高效且智能的配电,精准满足现代AI工厂系统的供电需求。 赋能人工智能未来:A
    的头像 发表于 08-28 21:18 1235次阅读
    赋能<b class='flag-5'>人工智能</b>未来:ADI宣布支持800 VDC<b class='flag-5'>数据中心</b>架构

    睿海光电以高效交付与广泛兼容助力AI数据中心800G光模块升级

    核心网络支撑。未来,随着1.6T光模块的落地,睿海光电将进一步推动数据中心向更高性能、更智能化演进,携手全球伙伴开启AI新时代。 睿海光电——AI网络升级的可靠伙伴!
    发表于 08-13 19:01

    AI 边缘计算网关:开启智能新时代的钥匙​—龙兴物联

    顺畅地通向云端,实现设备与云端之间高效的数据传输与交互。通过融合先进的边缘计算和人工智能技术,AI 边缘计算网关能够在靠近数据源的网络边缘,对数据进行实时处理和精准分析,进而实现
    发表于 08-09 16:40

    苏州DCIM数据中心基础设施管理运维系统简介

    数据中心基础设施管理)系统正是在这样的背景下应运而生,为各类规模的数据中心提供智能化管理解决方案。 传统数据中心运维往往面临诸多痛点:设备
    的头像 发表于 08-01 09:40 1170次阅读
    苏州DCIM<b class='flag-5'>数据中心</b><b class='flag-5'>基础设施</b>管理运维系统简介

    最新人工智能硬件培训AI 基础入门学习课程参考2025版(大模型篇)

    人工智能大模型重塑教育与社会发展的当下,无论是探索未来职业方向,还是更新技术储备,掌握大模型知识都已成为新时代的必修课。从职场上辅助工作的智能助手,到课堂用于学术研究的智能工具,大模
    发表于 07-04 11:10

    人工智能正在改变世界

    它需要大量的处理能力,需求每一百天就会翻一番,这推动了人工智能基础设施的投资热潮。未来的数据中心需要满足和管理对计算资源前所未有的需求:既要能智能高效地提供支持,又要满足相应的计算、内
    的头像 发表于 06-13 10:19 918次阅读

    如何构建边缘人工智能基础设施

    随着人工智能的不断发展,其争议性也越来越大;而在企业和消费者的眼中,人工智能价值显著。如同许多新兴科技一样,目前人工智能的应用主要聚焦于大规模、基础设施密集且高功耗的领域。然而,随着
    的头像 发表于 06-09 09:48 1190次阅读

    如何有效地管理人工智能数据中心的电源

    作者:Kenton Williston 投稿人:DigiKey 北美编辑 人工智能 (AI) 和机器学习 (ML) 的兴起提出了前所未有的电力需求。下一代数据中心在电源管理、效率和可靠性方面
    的头像 发表于 05-25 11:30 1171次阅读
    如何有效地管理<b class='flag-5'>人工智能</b><b class='flag-5'>数据中心</b>的电源

    是德科技如何破解人工智能基础设施困局

    人工智能正在改变世界。然而,它需要大量的处理能力。需求每 100 天翻一番,这推动了人工智能基础设施的投资热潮。
    的头像 发表于 05-09 15:53 947次阅读