0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

大模型非GPU专属 AMD EPYC秀出CPU AI实力

微云疏影 来源:综合整理 作者:综合整理 2023-12-07 15:51 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

12月6日,amd在加利福尼亚州圣何塞举行的“advancing ai”活动中发布了一系列创新产品,包括mi300、Ryzen ai pc处理器。作为amd未来发展的关键,amd试图在所有产品线上实现ai功能,从大规模数据中心训练和推理解决方案到面向消费者的电脑和游戏体验。

amd在高性能计算(hpc)和数据中心领域显示出持续的领导能力。amd epyc处理器和amd instinct加速器仍然是世界上许多最创新、最节能、最快的超级计算机的基本解决方案。

根据世界超级计算机排名第62届top500,全体500个超级电脑套装的amd平台为140个,比前年增加了39%。此外,amd根据green500的最新名单,为世界上能源效率最高的10台超级计算机中的8台提供了电力。

目前,橡树国家实验室使用amd epyc处理器和安装加速器驱动最先进的超级计算机,劳伦斯利弗莫尔国家实验室也开始安装超大型超级计算机el capitan。

今天amd发布了第一个ai/hpc数据中心apu——mi300a,并将zen3 cpu和cdna3 gpu整合到一个芯片中,使用了hbm3内存和第四代infinity fabric高速总线的相互连接。这样可以简化结构,简化程序设计。

据amd介绍,apu具有充分利用集成架构优势的性能潜力。统一内存,统一内存,共享的infinity母线技术,动态功耗分布及程序设计上的便利性等。

由于这些优点,mi300a在openfoam上的工作效率是h100的4倍。peakhpc每瓦的性能比gh200高出2倍。

在hpc等性能上也与h100相似或领先。随着mi300a的增加,El Capitan将成为世界上第一台具备2 exaplop(100亿次)分配密度的超级电脑,同时也将成为世界上最快的超级计算机。

此外,EPYC本身也能够具备强大的AI能力。在今年6月份举办的“数据中心与AI技术首映”上,AMD针对云原生负载进行了优化,带来了以吞吐量为导向,拥有最高终端密度和效率的AMD EPYC 9704处理器“Bergamo”,以及面向技术计算领域的Genoa-X。其中,Genoa-X的亮点包括领先的5nm工艺节点技术、高达96个高性能Zen4核心、高达1.1GB的L3 Cache,兼容SP5插槽等,可以在Ansys CFX中每天完成更多的设计任务,从而大幅加速产品开发。

在今日活动的演示现场,记者看到采用 AMD EPYC 9654处理器运行Llama 2大语言模型的展示,在同竞品Xeon Platinum 8480的对比中,处理运行速度提升36%。这意味着,在某些场景下,依靠CPU提供的AI算力也能够进行大模型处理,而非仅依靠GPU,这对于具有较少GPU资源的企业而言非常具有吸引力,也带来了成本上的节省。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • amd
    amd
    +关注

    关注

    25

    文章

    5652

    浏览量

    139084
  • 加速器
    +关注

    关注

    2

    文章

    837

    浏览量

    39742
  • 超级计算机
    +关注

    关注

    2

    文章

    479

    浏览量

    43175
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    历史首次!AMD服务器CPU市占率达50%

    英特尔持平。根据AMD的数据显示,自EPYC CPU推出以来,其在服务器领域的市场份额由2018年的2%提升到2024年上半年的34%。在持平之后未来竞争将变得更加激烈。       回看每一代
    的头像 发表于 08-11 03:20 1w次阅读
    历史首次!<b class='flag-5'>AMD</b>服务器<b class='flag-5'>CPU</b>市占率达50%

    AI模型的配置AI模型该怎么做?

    STM32可以跑AI,这个AI模型怎么搞,知识盲区
    发表于 10-14 07:14

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片的需求和挑战

    的工作吗? 从书中也了解到了AI芯片都有哪些?像CPUGPU、FPGA、ASIC都是AI芯片。 其他的还是知道的,FPGA属于AI芯片这个
    发表于 09-12 16:07

    AMD实现首个基于台积电N2制程的硅片里程碑

    代号为“Venice”的新一代AMD EPYC CPU是首款基于台积电新一代N2制程的高性能计算产品。   AMD表示,其代号为“Venice”的新一代
    的头像 发表于 05-06 14:46 600次阅读
    <b class='flag-5'>AMD</b>实现首个基于台积电N2制程的硅片里程碑

    正点原子 AI BOX0 智能伴侣,1.54寸高清屏+长效续航,语音畅聊,情景对话,知识科普,多色可选,随身携带!

    正点原子 AI BOX0携小智AI来袭,专属你的智能伴侣!你的全能AI伙伴,懂你更贴心 正点原子ESP32 AI BOX0 — 不只是桌面摆
    发表于 04-24 16:11

    首创开源架构,天玑AI开发套件让端侧AI模型接入得心应手

    科正将AI能力体系化并赋能终端生态。 大会上,联发科定义了“智能体化用户体验”的五大特征:主动及时、知你懂你、互动协作、学习进化和专属隐私信息守护。这五大特征需要跨越从芯片、模型、应用、终端乃至整个
    发表于 04-13 19:52

    AMD EPYC嵌入式9005系列处理器发布

    AMD(超威,纳斯达克股票代码:AMD )今日宣布推出第五代 AMD EPYC(霄龙)嵌入式处理器,扩展其 x86 嵌入式处理器产品组合。
    的头像 发表于 03-12 17:08 1388次阅读

    专访AMD王启尚 从RDNA 4到FSR 4,AMD GPU技术创新引领行业新发展

    技术的优势以及对AI算力应用的规划。 AMD高级副总裁、GPU技术与工程研发王启尚 王启尚先生在 2012 到 2018 年 1 月期间担任 Synaptics 公司的系统芯片工程研发高级副总裁,负责
    的头像 发表于 03-06 11:19 715次阅读
    专访<b class='flag-5'>AMD</b>王启尚 从RDNA 4到FSR 4,<b class='flag-5'>AMD</b> <b class='flag-5'>GPU</b>技术创新引领行业新发展

    无法在GPU上运行ONNX模型的Benchmark_app怎么解决?

    CPUGPU 上运行OpenVINO™ 2023.0 Benchmark_app推断的 ONNX 模型。 在 CPU 上推理成功,但在
    发表于 03-06 08:02

    AMD将DeepSeek-V3模型集成至Instinct MI300X GPU

    AMD近日宣布了一项重要进展,成功将全新的DeepSeek-V3模型集成到其Instinct MI300X GPU上。这一举措标志着AMDAI
    的头像 发表于 02-06 09:41 824次阅读

    AMD集成DeepSeek-V3模型至Instinct MI300X GPU

    。 据悉,DeepSeek-V3模型AMD针对AI推理应用进行深度优化的成果。通过集成到Instinct MI300X GPUAMD旨在
    的头像 发表于 02-05 13:58 795次阅读

    小米加速布局AI模型,搭建GPU万卡集群

    近日,有消息称小米正在紧锣密鼓地搭建自己的GPU万卡集群,旨在加大对AI模型的投入力度。据悉,小米的大模型团队在成立之初就已经拥有了6500张GP
    的头像 发表于 12-28 14:25 798次阅读

    GPU是如何训练AI模型

    AI模型的训练过程中,大量的计算工作集中在矩阵乘法、向量加法和激活函数等运算上。这些运算正是GPU所擅长的。接下来,AI部落小编带您了解GPU
    的头像 发表于 12-19 17:54 1401次阅读

    联想发布基于第五代AMD EPYC处理器的服务器产品

    近日,联想携手AMD共同举办“异构智算,稳定高效——联想算力基础设施新品发布会”。本次发布会上,联想重磅发布8款基于第五代AMD EPYC处理器的服务器产品——联想问天、ThinkSystem V3
    的头像 发表于 12-16 16:23 1222次阅读

    《CST Studio Suite 2024 GPU加速计算指南》

    的各个方面,包括硬件支持、操作系统支持、许可证、GPU计算的启用、NVIDIA和AMD GPU的详细信息以及相关的使用指南和故障排除等内容。 1. 硬件支持 - NVIDIA GPU
    发表于 12-16 14:25