0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AMD硬刚英伟达,推出Instinct MI300,单芯片可运行800亿参数

Simon观察 来源:电子发烧友网 作者:黄山明 2023-06-15 01:45 次阅读

电子发烧友网报道(文/黄山明)美国时间本周二,AMD举行了重磅发布会,推出了一款全新的人工智能GPU Instinct MI300,并表示这款处理器将于今年晚些时候开始向部分客户发货。自英伟达发布了AI芯片后,便彻底带动了市场的投资热情,也推动英伟达登上万亿美元市值的高峰。此次AMD发布重磅AI芯片,有望对英伟达当前的市场地位形成一定冲击。

AMD推出高性能AI芯片

在这次AMD的新品发布会中,核心产品无疑是用于训练大模型的GPU Instinct MI300。早在今年初,AMD便已经宣布了新一代Instinct MI300,是全球首款同时集成CPU、GPU的数据中心APU。

601e5ef4-0a8e-11ee-962d-dac502259ad0.png

如今,这款芯片的名字变成了Instinct MI300A,而纯GPU产品则命名为Instinct MI300X。据AMD的CEO苏姿丰透露,MI300A是全球首个为AI和HPC(高性能计算)打造的APU加速卡,拥有13个小芯片,总共包含1460亿个晶体管,24个Zen 4 CPU核心,1个CDNA 3图形引擎和128GB HBM3内存。

相比前代MI250,MI300的性能提高八倍,效率提高五倍。AMD在发布会稍早介绍,新的Zen 4c内核比标准的Zen 4内核密度更高,比标准Zen 4的内核小35%,同时保持100%的软件兼容性。

602c2b92-0a8e-11ee-962d-dac502259ad0.png

而GPU MI300X更是本次发布会的重点,这款芯片是AMD针对大语言模型优化的版本,该产品的晶体管数量达到1530亿个,内存达到了192GB,内存带宽为5.2TB/s,Infinity Fabric带宽为896GB/s。对比英伟达的H100,MI300X提供的HBM(高带宽内存)密度约为H100的2.4倍,HBM带宽是1.6倍。

这意味着AMD的这款产品可以运行比英伟达H100更大的模型,在现场AMD演示了MI300X运行400亿参数的Falcon模型,而OpenAI的GPT-3模型有1750亿个参数。苏姿丰还用Hugging Face基于MI300X的大模型写了一首关于活动举办地旧金山的诗。

这也是全球首次在单个GPU上运行这么大的模型,据AMD介绍,单个MI300X可以运行一个参数多达800亿的模型。而在未来随着AI模型越来越大,意味着需要更多GPU来运行最新的大模型,而AMD芯片上内存的增加,意味着开发人员不需要那么多GPU,可以为用户节省大量成本。

60a97e44-0a8e-11ee-962d-dac502259ad0.png

苏姿丰表示,MI300X将于今年第三季度向一些客户提供样品,并于第四季度量产。同时AMD还发布了AMD Instinct Platform,集合了8个MI300X,可提供总计1.5TB的HBM3内存。对标英伟达的CUDA,AMD也介绍了自身的芯片软件ROCm,AMD总裁Victor Peng称,在构建强大的软件堆栈方面,AMD取得了真正的巨大进步,ROCm软件栈可与模型、库、框架和工具的开放生态系统配合使用。

之所以将重心放在AI芯片,也是因为AMD非常看好未来的AI市场。苏姿丰认为,数据中心人工智能加速器的潜在市场总额将从今年的300亿美元增长到2027年的1500亿美元以上。

硬刚英伟达,但尚未透露大客户

从AMD所介绍的产品性能来看,将成为当下AI市场的有力竞争者,尤其在ChatGPT等生成式AI的带动下,市场对高性能GPU需求旺盛。不过当前市场中,英伟达处于绝对优势,占据80%的市场。

而AMD并没有公布这款GPU的具体价格,但是对比英伟达H100价格大多在3万美元以上,如果MI300X价格能够更加实惠,将显著的对英伟达产品造成冲击,并有助于降低生成式AI的研发成本。

有意思的是,在如此强劲的性能面前,市场却似乎并不买单。截至当日收盘,AMD股价反而下降了3.61%,市值来到2000亿元关口。而英伟达股价则拉升了3.9%,总市值达到1.01万亿美元,是AMD的五倍。

此次AMD并未透露哪些公司会采用MI300X或简配版MI300A,而在此前的发布会中,AMD都会披露新产品的大客户。这可能让市场认为,目前并没有大客户为这款芯片买单。

另一方面,AMD并没有透露新款AI芯片的具体售价,但想要有显著的成本优势可能不太现实,因为高密度的HBM价格昂贵。即便MI300X的内存达到了192GB,但这也不是显著优势,因为英伟达也拥有相同内存规格的产品。

更重要的原因在于,MI300并不具备H100所拥有的Transformer Engine。Transformer Engine能够用于加速Transformer模型,以在AI的训练和推理中以较低的内存利用率提供更好的性能。

有分析师认为,如果训练一个新的模型,需要投入数千个GPU,并耗费一年的时间,那么几乎不会有人会浪费2-3年或者投入3倍数量的GPU。而Transformer Engine能够让大模型实现三倍的性能表达。

尽管市场中认为,AMD的MI300芯片应该是除了谷歌的TPU之外,能与英伟达在AI训练端上匹敌的产品。成为当前大企业在训练AI大模型时,除了英伟达之外的另一个重要选择。

但想要在短时间内挑战英伟达,显然还是比较困难的。就如AMD总裁VictorPeng说的那样,“尽管这是一个过程,但我们在构建强大的软件堆栈方面取得了很大进展,该软件堆栈与开放的模型、库、框架和工具生态系统兼容。”

无论如何需要市场中有大客户切实的使用AMD新款芯片。

小结

AMD此次重磅发布的MI300系列芯片,无疑为AI市场注入了一剂强心针,不仅预示着AMD在持续看好未来的AI市场,也将表明AMD将在这一市场中与英伟达正面竞争。至少对于相关企业及用户而言,有更多的选择是一件好事。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • amd
    amd
    +关注

    关注

    25

    文章

    5197

    浏览量

    132632
  • 英伟达
    +关注

    关注

    22

    文章

    3327

    浏览量

    87768
收藏 人收藏

    评论

    相关推荐

    人工智能市场风向转变,AMD Instinct MI300X GPU更受欢迎

    近一半的受访者表示对AMDInstinct MI300X GPU持乐观态度。与英伟达的H100系列相比,MI300X不仅价格与性能比值更为
    的头像 发表于 03-11 15:28 535次阅读

    AMD首批Instinct MI300X已开始交付

    模型。与Instinct MI300A不同,Instinct MI300X不包含x86 CPU内核,但通过增加CDNA 3小芯片的数量和搭载
    的头像 发表于 01-24 16:57 352次阅读

    AMD Instinct MI300A获得德国订单

    先进微设备公司(AMD)于本月6日成功举办了"推进人工智能"(Advancing AI)主题活动,期间正式发布了专为数据中心设计的Instinct MI300系列计算卡,首批推出
    的头像 发表于 12-25 11:30 224次阅读
    <b class='flag-5'>AMD</b> <b class='flag-5'>Instinct</b> <b class='flag-5'>MI300</b>A获得德国订单

    戴尔禁止经销商在中国销售RX 7900 XTX、7900 XT、PRO W7900 和MI300 GPU

    被禁止销售的产品有isg的instinct加速器和csg的客户端解决方案组的radeon gpu。戴尔禁止销售的“amd isg”产品包括instinct mi210、
    的头像 发表于 12-04 09:37 321次阅读

    AMD对抗英伟达的王牌,MI Instinct

    大语言模型市场,专门推出了纯CDNA 3 GPU架构打造的MI300X,集成192GB的HBM3。   下一代数据中心与超算的选择 , Instinct MI300   随着
    的头像 发表于 09-19 01:11 1491次阅读
    <b class='flag-5'>AMD</b>对抗<b class='flag-5'>英伟</b>达的王牌,<b class='flag-5'>MI</b> <b class='flag-5'>Instinct</b>

    mi300芯片和h100性能参数对比

    mi300芯片和h100性能参数对比 MI300芯片和H100芯片都是目前市场上比较常见的
    的头像 发表于 08-22 16:46 1613次阅读

    gh200和mi300参数对比

    gh200和mi300参数对比 近年来,人们的生活越来越离不开智能家居设备,其中智能音箱是不可或缺的重要组成部分。然而,在市场上出现了越来越多的智能音箱,消费者在面对选择时往往会感到困惑。本文将对
    的头像 发表于 08-17 10:51 390次阅读

    gh200和mi300参数对比

    gh200和mi300参数对比 近年来,人们的生活越来越离不开智能家居设备,其中智能音箱是不可或缺的重要组成部分。然而,在市场上出现了越来越多的智能音箱,消费者在面对选择时往往会感到困惑。本文将对
    的头像 发表于 08-16 17:33 514次阅读

    AMD考虑将MI300和旧版MI250芯片产品调整性能参数以维持出口

    AMD考虑将MI300和旧版MI250芯片产品调整性能参数以维持出口 因为美国限制芯片出口,前有
    的头像 发表于 08-02 15:24 871次阅读

    AMD的翻身仗

    今年6月,AMD发布了一款专门针对AI需求的最新款芯片Instinct MI300
    的头像 发表于 07-13 16:58 527次阅读
    <b class='flag-5'>AMD</b>的翻身仗

    【AI简报20230616】英伟推出Instinct MI300、OpenAI凌晨再给ChatGPT、GPT-4加码!

    AI 简报 20230616 期 1. AMD硬刚英伟达,推出Instinct MI300,单芯片
    的头像 发表于 06-17 18:15 655次阅读
    【AI简报20230616】<b class='flag-5'>英伟</b>达<b class='flag-5'>推出</b><b class='flag-5'>Instinct</b> <b class='flag-5'>MI300</b>、OpenAI凌晨再给ChatGPT、GPT-4加码!

    AMD全力追赶英伟推出新一代AI芯片

    AMD在旧金山发布会上推出了新一代AI芯片、数据中心CPU和DPU。在生成式AI浪潮下,最受关注的新品是AI芯片Instinct
    的头像 发表于 06-15 16:16 1338次阅读

    亚马逊高管称AWS云服务将考虑采用AMD MI300芯片

    目前,人工智能领域仍由英伟达的芯片主导,h100、a100等加速卡供不应求。amd推出instint mi300系列产品,与
    的头像 发表于 06-15 10:39 543次阅读

    AMD推出MI300X,可运行多达800亿参数模型

      6月13日(星期二),AMD举行新品发布会,最重磅的新品当属于具有大模型训练功能的GPU Instinct MI300
    的头像 发表于 06-15 10:39 825次阅读

    AMD硬刚英伟达,推出Instinct MI300,单芯片可运行800亿参数

    在这次AMD的新品发布会中,核心产品无疑是用于训练大模型的GPU Instinct MI300。早在今年初,AMD便已经宣布了新一代Instinct
    的头像 发表于 06-14 16:46 2069次阅读
    <b class='flag-5'>AMD</b>硬刚<b class='flag-5'>英伟</b>达,<b class='flag-5'>推出</b><b class='flag-5'>Instinct</b> <b class='flag-5'>MI300</b>,单<b class='flag-5'>芯片</b><b class='flag-5'>可运行</b><b class='flag-5'>800</b>亿<b class='flag-5'>参数</b>