0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

大模型非GPU专属 AMD EPYC秀出CPU AI实力

微云疏影 来源:综合整理 作者:综合整理 2023-12-07 15:51 次阅读

12月6日,amd在加利福尼亚州圣何塞举行的“advancing ai”活动中发布了一系列创新产品,包括mi300、Ryzen ai pc处理器。作为amd未来发展的关键,amd试图在所有产品线上实现ai功能,从大规模数据中心训练和推理解决方案到面向消费者的电脑和游戏体验。

amd在高性能计算(hpc)和数据中心领域显示出持续的领导能力。amd epyc处理器和amd instinct加速器仍然是世界上许多最创新、最节能、最快的超级计算机的基本解决方案。

根据世界超级计算机排名第62届top500,全体500个超级电脑套装的amd平台为140个,比前年增加了39%。此外,amd根据green500的最新名单,为世界上能源效率最高的10台超级计算机中的8台提供了电力。

目前,橡树国家实验室使用amd epyc处理器和安装加速器驱动最先进的超级计算机,劳伦斯利弗莫尔国家实验室也开始安装超大型超级计算机el capitan。

今天amd发布了第一个ai/hpc数据中心apu——mi300a,并将zen3 cpu和cdna3 gpu整合到一个芯片中,使用了hbm3内存和第四代infinity fabric高速总线的相互连接。这样可以简化结构,简化程序设计。

据amd介绍,apu具有充分利用集成架构优势的性能潜力。统一内存,统一内存,共享的infinity母线技术,动态功耗分布及程序设计上的便利性等。

由于这些优点,mi300a在openfoam上的工作效率是h100的4倍。peakhpc每瓦的性能比gh200高出2倍。

在hpc等性能上也与h100相似或领先。随着mi300a的增加,El Capitan将成为世界上第一台具备2 exaplop(100亿次)分配密度的超级电脑,同时也将成为世界上最快的超级计算机。

此外,EPYC本身也能够具备强大的AI能力。在今年6月份举办的“数据中心与AI技术首映”上,AMD针对云原生负载进行了优化,带来了以吞吐量为导向,拥有最高终端密度和效率的AMD EPYC 9704处理器“Bergamo”,以及面向技术计算领域的Genoa-X。其中,Genoa-X的亮点包括领先的5nm工艺节点技术、高达96个高性能Zen4核心、高达1.1GB的L3 Cache,兼容SP5插槽等,可以在Ansys CFX中每天完成更多的设计任务,从而大幅加速产品开发。

在今日活动的演示现场,记者看到采用 AMD EPYC 9654处理器运行Llama 2大语言模型的展示,在同竞品Xeon Platinum 8480的对比中,处理运行速度提升36%。这意味着,在某些场景下,依靠CPU提供的AI算力也能够进行大模型处理,而非仅依靠GPU,这对于具有较少GPU资源的企业而言非常具有吸引力,也带来了成本上的节省。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • amd
    amd
    +关注

    关注

    25

    文章

    5203

    浏览量

    132648
  • 加速器
    +关注

    关注

    2

    文章

    748

    浏览量

    36604
  • 超级计算机
    +关注

    关注

    2

    文章

    434

    浏览量

    41613
收藏 人收藏

    评论

    相关推荐

    RISC-V芯片新突破:CPUGPU一体化核心设计

    X-Silicon 的芯片与其他架构不同,其设计将 CPUGPU 的功能结合到单核架构中。这与 Intel 和 AMD 的典型设计不同,后者有独立的 CPU 核心和
    发表于 04-07 10:41 127次阅读
    RISC-V芯片新突破:<b class='flag-5'>CPU</b>与<b class='flag-5'>GPU</b>一体化核心设计

    国产GPUAI模型领域的应用案例一览

    电子发烧友网报道(文/李弯弯)近一年多时间,随着大模型的发展,GPUAI领域的重要性再次凸显。虽然相比英伟达等国际大厂,国产GPU起步较晚、声势较小。不过近几年,国内不少
    的头像 发表于 04-01 09:28 2476次阅读
    国产<b class='flag-5'>GPU</b>在<b class='flag-5'>AI</b>大<b class='flag-5'>模型</b>领域的应用案例一览

    AMD EPYC处理器:AI推理能力究竟有多强?

    如今,AMD EPYC处理器已经成为最常被选择用于AI推理的服务器平台,尤其是第四代Genoa EPYC 9004系列,执行AI推理的能力又
    发表于 03-15 09:47 153次阅读

    AMD第四代EPYC(霄龙)系列处理器介绍

    与上一代AMD EPYC 7763处理器相比,AMD EPYC 9534处理器搭载的“Zen 4”核心可将整数性能与浮点性能分别提升约45%和75%,从而释放热度范围,提供更多算力。
    发表于 01-29 12:25 534次阅读

    AMD Instinct加速器、AMD EPYC处理器为Microsoft带来全新AI和计算能力

    型VM —   近日,在Microsoft Ignite全球技术大会上,AMD和Microsoft共同展示了包括即将到来的AMD Instinct加速器、AMD EPYC(霄龙)
    的头像 发表于 12-04 13:54 378次阅读

    AMD扩展其第三代AMD EPYC处理器家族并推出6款全新产品

    AMD加强广受好评的第三代EPYC CPU产品组合,为支持主要业务基础设施的服务器提供性能和能效— —包括Cisco、Dell Technologies、Gigabyte、HPE、Lenovo
    的头像 发表于 11-11 10:37 992次阅读

    超微收购Nod.ai 提升开源AI软件实力

    加速器、Ryzen AI处理器、EPYC处理器、Versal系统单晶片(SoC)以及Radeon显示卡等最佳化的AI解决方案部署。这项协议与AMD以开放软件产业体系为主轴的
    的头像 发表于 10-16 16:55 535次阅读

    【KV260视觉入门套件试用体验】Vitis AI 构建开发环境,并使用inspector检查模型

    Vitis AI 的所有工具和库,而不需要在本地安装任何依赖。CPU版本的Vitis AI docker 可以在没有 GPU 的机器上运行,但是
    发表于 10-14 15:34

    AMD扩展第四代EPYC CPU产品带来突破性的性能

    ,如今,技术计算可支持更快的设计迭代和更强大的模拟,以帮助企业设计新的引人注目的产品。 2023年6月,AMD 推出了采用 AMD 3D V-Cache技术的第四代 AMD EPYC
    的头像 发表于 10-07 14:54 626次阅读

    AMD推出全新AMD EPYC(霄龙)8004系列处理器

    优化的单插槽封装,可提供卓越的能效和强大的性能— 今日,AMD宣布推出全新AMD EPYC(霄龙)8004系列处理器,进而完善了工作负载优化处理器的第四代AMD
    的头像 发表于 09-20 10:12 501次阅读

    GPU上OpenVINO基准测试的推断模型的默认参数与CPU上的参数不同是为什么?

    CPUGPU 上推断出具有 OpenVINO™ 基准的相同模型: benchmark_app.exe -m model.xml -d CPU benchmark_app.e
    发表于 08-15 06:43

    AMD 3D V-Cache技术的第四代EPYC处理器性能介绍

    采用AMD 3D V-Cache技术的第四代AMD EPYC处理器进一步扩展了AMD EPYC 9004系列处理器,为计算流体动力学(CFD
    发表于 08-14 14:38 306次阅读
    <b class='flag-5'>AMD</b> 3D V-Cache技术的第四代<b class='flag-5'>EPYC</b>处理器性能介绍

    AI开发测试关于CPUGPU的资源配比

    GPU服务器相对CPU服务器来说是非常昂贵的,大约是美金和人民币汇率的差距(以8卡GPU服务器为例),而且在芯片紧缺的年代,GPU到货周期还比较长!面对资源昂贵、算力又是
    发表于 06-25 11:31 1174次阅读
    <b class='flag-5'>AI</b>开发测试关于<b class='flag-5'>CPU</b>和<b class='flag-5'>GPU</b>的资源配比

    AMD在第四代EPYC CPU产品组合中增加两款新工作负载优化处理器

      -全新第4代AMD EPYC处理器在云原生和技术计算方面提供领先性能- -微软Azure和Meta在“数据中心和AI技术首映”上展示了对全新AMD
    的头像 发表于 06-20 11:40 351次阅读

    AMD甩出最强AI芯片 单个GPU跑大模型

    专为生成式AI设计的GPU:HBM密度是英伟达H100的2.4倍,带宽是英伟达H100的1.6倍。
    的头像 发表于 06-20 10:47 655次阅读