0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Azure AI 基础设施强势升级!进一步扩展人工智能能力

微软科技 来源:未知 2023-11-21 08:15 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

微软 Azure AI 基础设施是微软扩展产品和服务的核心支柱,为开发人员提供在 Azure 平台上构建下一代 AI 驱动的应用程序所需的系统、工具和资源。

微软在硬件和 AI 基础设施上的早期投资,正在帮助客户将 AI 的高效和创新变现为业务价值。借力 AI,用户可以创造更丰富的用户体验,推动创新,提高业务生产力。

微软 Azure AI 基础设施能够支持全球可扩展,且未来微软仍将对其进行持续投资与扩展。现在,微软推出了 ND H100 v5 虚拟机系列,这款虚拟机配备了 NVIDIA H100 Tensor Core 图形处理单元(GPU)和低延迟网络,推动企业步入 AI 应用新时代。

wKgZomVb97OAfJeeAABHOin8TBw980.png

前所未有的 AI 处理和规模

ND H100 v5 虚拟机系列发布

微软全新发布Azure ND H100 v5 虚拟机(VM)系列,现已在美国东部和美国中南部 Azure 区域提供。该系列配备了最新的 NVIDIA H100 Tensor Core GPU 和 NVIDIA Quantum-2 InfiniBand 网络。凭借在超级计算性能和规模方面的丰富经验,微软精心设计的 ND H100 v5 系列虚拟机,用于应对先进的 AI 工作负载带来的日益增加的复杂性。作为微软在 AI 领域深入和持续投资的一部分,微软正在利用一个 AI 优化的 4K GPU 集群,并将在明年将其扩展到数十万个全新的 GPU。

ND H100 v5 VM 虚拟机系列具有以下特性:

  • AI 超级计算 GPU:配备了八个 NVIDIA H100 Tensor Core GPU。比起上一代虚拟机,该系列可让 AI 模型显著提速,为企业提供无与伦比的计算能力。

  • 新一代计算机处理单元(CPU):CPU 性能对于 AI 的训练和推理至关重要,微软选择了第四代 Intel Xeon Scalable 处理器,确保虚拟机达到最佳的处理速度。

  • 低延迟网络:采用 NVIDIA Quantum-2 ConnectX-7 InfiniBand,每个 GPU 拥有 400Gb/s、每个 VM 拥有 3.2 Tb/s 的跨节点带宽,确保 GPU 间的无缝性能,堪称全球顶级的超级计算机。

  • 优化主机到 GPU 的性能:通过PCIe Gen5提供每个GPU 64GB/s的带宽,Azure在CPU和GPU之间具有显著的性能优势。

  • 大规模的内存和内存带宽:DDR5 内存是该系列虚拟机的核心,提供更高的数据传输速度和效率,使它们成为处理大规模数据集工作负载的理想选择。

该系列虚拟机已经证明了它们的性能优势,使用新的8位 FP8 浮点数据类型进行矩阵乘法操作时,速度提升了六倍,比前一代的 FP16 更快。ND H100 v5 VM 帮助大型语言模型(如 BLOOM 175B 端到端模型)实现了最高两倍的推理速度提升,验证了它们进一步优化 AI 应用的潜力。

由 Azure AI 基础设施支持的人工智能,具有推动从制造到零售、从金融服务到医疗保健等各行各业发展的潜力。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 微软
    +关注

    关注

    4

    文章

    6753

    浏览量

    108085

原文标题:Azure AI 基础设施强势升级!进一步扩展人工智能能力

文章出处:【微信号:mstech2014,微信公众号:微软科技】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    伟创力与AMD进一步深化战略合作

    近日,伟创力宣布与全球领先的高性能与自适应计算芯片公司 AMD(超威半导体) 进一步深化战略合作,在美国本土制造 AMD Instinct 平台,加速先进 AI 基础设施落地。作为合作的首个成果
    的头像 发表于 03-11 15:11 410次阅读

    为何CPU是AI基础设施的核心

    人工智能 (AI) 并非种具有单理想基础设施的单工作负载。
    的头像 发表于 03-11 10:35 1359次阅读

    华为推动电信云加速向AI基础设施演进

    随着AI技术持续突破,人工智能正成为全球产业升级的核心驱动力。从通用大模型到行业智能应用,AI已成为新
    的头像 发表于 02-27 09:43 402次阅读

    BlackBerry QNX与众森软件进一步深化战略合作

    今日,深圳市众森软件有限公司(以下简称"众森软件")正式宣布与全球领先的实时操作系统与嵌入式软件供应商 QNX(BlackBerry有限公司旗下部门QNX)进一步深化战略合作。此次合作将进一步推动下
    的头像 发表于 12-04 16:40 2074次阅读

    上汽奥迪与创维汽车智能合作进一步深化升级

    近日,创维汽车智能迎来重要突破:上汽奥迪客户将当前公司开发的显示屏项目沿用至上汽奥迪其他主力车型。这决定不仅体现了客户对创维汽车智能技术实力与服务品质的高度认可,更标志着双方合作进一步
    的头像 发表于 11-25 10:32 879次阅读

    GlobalData与华为探讨AI对网络基础设施的机遇与挑战

    GlobalData 研究总监Emir Halilovic 与华为数据通信产品线NCE数据通信领域总裁王辉共同探讨了人工智能AI)对网络基础设施带来的机遇(高性能网络需求、AI增强的
    的头像 发表于 10-14 14:24 780次阅读

    蔚来进一步拓展其全球业务

    8月18日,蔚来公司宣布将于2025年至2026年期间陆续进入新加坡、乌兹别克斯坦和哥斯达黎加三个市场,进一步拓展其全球业务,为当地用户带来创新、可持续、高品质的智能电动出行体验。
    的头像 发表于 08-20 17:00 1490次阅读

    摩尔线程“AI工厂”:以系统级创新定义新AI基础设施

    演讲中表示,为应对生成式AI爆发式增长下的大模型训练效率瓶颈,摩尔线程将通过系统级工程创新,构建新AI训练基础设施,致力于为AGI时代打造生产先进模型的“超级工厂”。   “
    发表于 07-28 10:34 2923次阅读
    摩尔线程“<b class='flag-5'>AI</b>工厂”:以系统级创新定义新<b class='flag-5'>一</b>代<b class='flag-5'>AI</b><b class='flag-5'>基础设施</b>

    Arm如何助力AI基础设施变革

    众所周知,人工智能 (AI) 有望革新人类活动的方方面面。然而,要充分释放这潜力,就必须面对个基本事实:支撑传统计算的基础设施已无法满足
    的头像 发表于 07-03 14:29 1144次阅读

    如何构建边缘人工智能基础设施

    随着人工智能的不断发展,其争议性也越来越大;而在企业和消费者的眼中,人工智能价值显著。如同许多新兴科技样,目前人工智能的应用主要聚焦于大规模、基础
    的头像 发表于 06-09 09:48 1208次阅读

    AI算力基础设施升级:三星高密度MLCC为GPU集群供电解决方案

    北京贞光科技作为三星电机级代理商,提供全面升级的技术支持、样品供应和供应链保障服务,为客户提供专业、可靠的站式解决方案,满足AI基础设施
    的头像 发表于 05-20 11:33 1422次阅读
    <b class='flag-5'>AI</b>算力<b class='flag-5'>基础设施</b><b class='flag-5'>升级</b>:三星高密度MLCC为GPU集群供电解决方案

    曙光AI解决方案助力光大银行数字化基础设施升级

    作为国有股份制商业银行,光大银行以全力做好“五篇大文章”为目标,结合曙光AI解决方案推进数字化基础设施升级,创新金融服务,深化科技赋能,走出了条具有光大特色的
    的头像 发表于 05-12 10:46 1011次阅读

    是德科技如何破解人工智能基础设施困局

    人工智能正在改变世界。然而,它需要大量的处理能力。需求每 100 天翻番,这推动了人工智能基础设施的投资热潮。
    的头像 发表于 05-09 15:53 959次阅读

    机器“掘金潮”:面向人工智能时代扩展基础设施

    总收益的45%将由人工智能驱动,越来越多的行业将受益于人工智能带来的生产力和产品性能提升。普华永道的研究进一步指出,人工智能有望为全球GDP额外贡献15.7万亿美元,增幅约为14%。然
    发表于 04-30 17:45 433次阅读

    机器“掘金潮”:面向人工智能时代扩展基础设施

    总收益的45%将由人工智能驱动,越来越多的行业将受益于人工智能带来的生产力和产品性能提升。普华永道的研究进一步指出,人工智能有望为全球GDP额外贡献15.7万亿美元,增幅约为14%。然
    的头像 发表于 04-30 11:11 818次阅读
    机器“掘金潮”:面向<b class='flag-5'>人工智能</b>时代<b class='flag-5'>扩展</b><b class='flag-5'>基础设施</b>