0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Azure AI 基础设施强势升级!进一步扩展人工智能能力

微软科技 来源:未知 2023-11-21 08:15 次阅读

微软 Azure AI 基础设施是微软扩展产品和服务的核心支柱,为开发人员提供在 Azure 平台上构建下一代 AI 驱动的应用程序所需的系统、工具和资源。

微软在硬件和 AI 基础设施上的早期投资,正在帮助客户将 AI 的高效和创新变现为业务价值。借力 AI,用户可以创造更丰富的用户体验,推动创新,提高业务生产力。

微软 Azure AI 基础设施能够支持全球可扩展,且未来微软仍将对其进行持续投资与扩展。现在,微软推出了 ND H100 v5 虚拟机系列,这款虚拟机配备了 NVIDIA H100 Tensor Core 图形处理单元(GPU)和低延迟网络,推动企业步入 AI 应用新时代。

wKgZomVb97OAfJeeAABHOin8TBw980.png

前所未有的 AI 处理和规模

ND H100 v5 虚拟机系列发布

微软全新发布Azure ND H100 v5 虚拟机(VM)系列,现已在美国东部和美国中南部 Azure 区域提供。该系列配备了最新的 NVIDIA H100 Tensor Core GPU 和 NVIDIA Quantum-2 InfiniBand 网络。凭借在超级计算性能和规模方面的丰富经验,微软精心设计的 ND H100 v5 系列虚拟机,用于应对先进的 AI 工作负载带来的日益增加的复杂性。作为微软在 AI 领域深入和持续投资的一部分,微软正在利用一个 AI 优化的 4K GPU 集群,并将在明年将其扩展到数十万个全新的 GPU。

ND H100 v5 VM 虚拟机系列具有以下特性:

  • AI 超级计算 GPU:配备了八个 NVIDIA H100 Tensor Core GPU。比起上一代虚拟机,该系列可让 AI 模型显著提速,为企业提供无与伦比的计算能力。

  • 新一代计算机处理单元(CPU):CPU 性能对于 AI 的训练和推理至关重要,微软选择了第四代 Intel Xeon Scalable 处理器,确保虚拟机达到最佳的处理速度。

  • 低延迟网络:采用 NVIDIA Quantum-2 ConnectX-7 InfiniBand,每个 GPU 拥有 400Gb/s、每个 VM 拥有 3.2 Tb/s 的跨节点带宽,确保 GPU 间的无缝性能,堪称全球顶级的超级计算机。

  • 优化主机到 GPU 的性能:通过PCIe Gen5提供每个GPU 64GB/s的带宽,Azure在CPU和GPU之间具有显著的性能优势。

  • 大规模的内存和内存带宽:DDR5 内存是该系列虚拟机的核心,提供更高的数据传输速度和效率,使它们成为处理大规模数据集工作负载的理想选择。

该系列虚拟机已经证明了它们的性能优势,使用新的8位 FP8 浮点数据类型进行矩阵乘法操作时,速度提升了六倍,比前一代的 FP16 更快。ND H100 v5 VM 帮助大型语言模型(如 BLOOM 175B 端到端模型)实现了最高两倍的推理速度提升,验证了它们进一步优化 AI 应用的潜力。

由 Azure AI 基础设施支持的人工智能,具有推动从制造到零售、从金融服务到医疗保健等各行各业发展的潜力。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 微软
    +关注

    关注

    4

    文章

    6246

    浏览量

    103077

原文标题:Azure AI 基础设施强势升级!进一步扩展人工智能能力

文章出处:【微信号:mstech2014,微信公众号:微软科技】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    英伟达拟收购以色列人工智能初创公司Run:AI

    据最新消息,英伟达正在与以色列的人工智能初创公司Run:AI进行深入谈判,计划收购这一专注于AI基础设施编排和管理平台的公司。据悉,此笔交易的价值预计将达到数亿美元,甚至有可能攀升至1
    的头像 发表于 03-19 11:25 266次阅读

    嵌入式人工智能的就业方向有哪些?

    嵌入式人工智能的就业方向有哪些? 在新轮科技革命与产业变革的时代背景下,嵌入式人工智能成为国家新型基础建设与传统产业升级的核心驱动力。同时在此背景驱动下,众多名企也纷纷在嵌入式
    发表于 02-26 10:17

    微软计划投资21亿美元加强西班牙AI与云基础设施

    微软副董事长兼总裁Brad Smith近日在社交媒体上透露,微软计划在接下来的两年内斥资21亿美元,以扩大其在西班牙的人工智能AI)和云基础设施。这一战略举措旨在进一步加强微软在全球
    的头像 发表于 02-20 14:18 194次阅读

    有什么方法可以进一步提高AD7714的分辨率啊?

    级放大再加给AD7714时,测得人分辨率还要低些。由于是用干电池得到AD7714的输入信号,该信号相对来说很稳定,而且板上的噪声也不是太大。请问各位大虾,还有什么方法可以进一步提高AD7714的分辨率啊?不胜感激!
    发表于 12-25 06:33

    借助人工智能,存储器比重将进一步增加

    SK海力士预测在人工智能AI)领域,存储器解决方案的比重将进一步增加,可以通过类似AiMX的解决方案部分替代图形处理单元(GPU)。
    发表于 12-04 09:52 189次阅读
    借助<b class='flag-5'>人工智能</b>,存储器比重将<b class='flag-5'>进一步</b>增加

    请问如何进一步减小DTC控制系统的转矩脉动?

    如何进一步减小DTC控制系统的转矩脉动?
    发表于 10-18 06:53

    STM8在待机模式如何进一步降低功耗?

    有什么方法可以进一步降低待机模式的功耗
    发表于 10-12 07:23

    ai人工智能机器人

    随着时间的推移,人工智能的发展越来越成熟,智能时代也离人们越来越近,近几年人工智能越来越火爆,人工智能的应用已经开始渗透到各行各业,与生活交融,成为人们无法拒绝,无法失去的
    发表于 09-21 11:09

    AI智能呼叫中心

    实际情况进行资源的自动调度和优化,从而进一步提高工作效率和降低人力成本。总结,AI智能呼叫中心凭借自动化处理、个性化服务、数据驱动决策以及节约成本等系列优势,为企业建立了更加高效、
    发表于 09-20 17:53

    基于IDE构建用于STM32微处理器的完整人工智能项目

    本用户手册指导了基于 IDE 逐步构建用于 STM32 微处理器的完整人工智能AI)项目,自动转换预训练好的神经网络(NN)并集成所生成的优化库。本手册还介绍了 X-CUBE-AI 扩展
    发表于 09-07 06:15

    如何将人工智能应用到效能评估系统软件中去解决

    ,我们可以将其应用到效能评估系统中,进一步提高效能评估的准确性和实用性。   华盛恒辉可以利用人工智能技术,通过对大量数据的分析,来识别和评估各个业务环节的表现,从而对效能进行评估和监测。此外,我们还可
    发表于 08-30 12:58

    人工智能(AI)X-CUBE-AI扩展包入门指南

    电子发烧友网站提供《人工智能(AI)X-CUBE-AI扩展包入门指南.pdf》资料免费下载
    发表于 08-01 09:39 2次下载
    <b class='flag-5'>人工智能</b>(<b class='flag-5'>AI</b>)X-CUBE-<b class='flag-5'>AI</b><b class='flag-5'>扩展</b>包入门指南

    美国或在半导体、人工智能和量子计算考虑进一步对我国加以限制

    美国或在半导体、人工智能和量子计算考虑进一步对我国加以限制 目前人工智能发展迅猛,与之相关的AI大模型训练在加速跟上,市场需求很大,对应的AI
    发表于 06-29 10:54 359次阅读

    AI 人工智能的未来在哪?

    人工智能AI智能大模型已经孵化;繁衍过程将突飞猛进,ChatGPT已经上线。 世界首富马斯克认为AI对人类是种威胁;谷歌前CEO施密特认
    发表于 06-27 10:48

    弘信电子与燧原科技共同打造人工智能算力基础设施

    协同等方向展开全面合作,共同打造人工智能算力基础设施。 燧原科技 燧原科技专注人工智能领域云端算力产品,致力为人工智能产业发展交付普惠的基础设施
    的头像 发表于 06-12 14:53 755次阅读