0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

大模型非GPU专属 AMD EPYC秀出CPU AI实力

微云疏影 来源:综合整理 作者:综合整理 2023-12-07 15:51 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

12月6日,amd在加利福尼亚州圣何塞举行的“advancing ai”活动中发布了一系列创新产品,包括mi300、Ryzen ai pc处理器。作为amd未来发展的关键,amd试图在所有产品线上实现ai功能,从大规模数据中心训练和推理解决方案到面向消费者的电脑和游戏体验。

amd在高性能计算(hpc)和数据中心领域显示出持续的领导能力。amd epyc处理器和amd instinct加速器仍然是世界上许多最创新、最节能、最快的超级计算机的基本解决方案。

根据世界超级计算机排名第62届top500,全体500个超级电脑套装的amd平台为140个,比前年增加了39%。此外,amd根据green500的最新名单,为世界上能源效率最高的10台超级计算机中的8台提供了电力。

目前,橡树国家实验室使用amd epyc处理器和安装加速器驱动最先进的超级计算机,劳伦斯利弗莫尔国家实验室也开始安装超大型超级计算机el capitan。

今天amd发布了第一个ai/hpc数据中心apu——mi300a,并将zen3 cpu和cdna3 gpu整合到一个芯片中,使用了hbm3内存和第四代infinity fabric高速总线的相互连接。这样可以简化结构,简化程序设计。

据amd介绍,apu具有充分利用集成架构优势的性能潜力。统一内存,统一内存,共享的infinity母线技术,动态功耗分布及程序设计上的便利性等。

由于这些优点,mi300a在openfoam上的工作效率是h100的4倍。peakhpc每瓦的性能比gh200高出2倍。

在hpc等性能上也与h100相似或领先。随着mi300a的增加,El Capitan将成为世界上第一台具备2 exaplop(100亿次)分配密度的超级电脑,同时也将成为世界上最快的超级计算机。

此外,EPYC本身也能够具备强大的AI能力。在今年6月份举办的“数据中心与AI技术首映”上,AMD针对云原生负载进行了优化,带来了以吞吐量为导向,拥有最高终端密度和效率的AMD EPYC 9704处理器“Bergamo”,以及面向技术计算领域的Genoa-X。其中,Genoa-X的亮点包括领先的5nm工艺节点技术、高达96个高性能Zen4核心、高达1.1GB的L3 Cache,兼容SP5插槽等,可以在Ansys CFX中每天完成更多的设计任务,从而大幅加速产品开发。

在今日活动的演示现场,记者看到采用 AMD EPYC 9654处理器运行Llama 2大语言模型的展示,在同竞品Xeon Platinum 8480的对比中,处理运行速度提升36%。这意味着,在某些场景下,依靠CPU提供的AI算力也能够进行大模型处理,而非仅依靠GPU,这对于具有较少GPU资源的企业而言非常具有吸引力,也带来了成本上的节省。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • amd
    amd
    +关注

    关注

    25

    文章

    5708

    浏览量

    140445
  • 加速器
    +关注

    关注

    2

    文章

    841

    浏览量

    40263
  • 超级计算机
    +关注

    关注

    2

    文章

    483

    浏览量

    43498
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    AMD获Meta千亿美元芯片大单,AI芯片市场格局生变

    电子发烧友网报道(文/李弯弯)近日,Meta与AMD共同宣布达成一项重磅的多年期协议。Meta将在其AI数据中心大规模部署6吉瓦的AMD GPU,并配套使用
    的头像 发表于 02-26 09:19 6060次阅读
    <b class='flag-5'>AMD</b>获Meta千亿美元芯片大单,<b class='flag-5'>AI</b>芯片市场格局生变

    历史首次!AMD服务器CPU市占率达50%

    英特尔持平。根据AMD的数据显示,自EPYC CPU推出以来,其在服务器领域的市场份额由2018年的2%提升到2024年上半年的34%。在持平之后未来竞争将变得更加激烈。       回看每一代
    的头像 发表于 08-11 03:20 1.1w次阅读
    历史首次!<b class='flag-5'>AMD</b>服务器<b class='flag-5'>CPU</b>市占率达50%

    AI智能体推动芯片需求从GPU扩展至CPU

    4月20日有消息称,摩根士丹利分析指出,随着AI自主性不断提升,其对芯片的需求正从图形处理器(GPU)向中央处理器(CPU)扩展,这一趋势将重塑数据中心建设模式,并促使投资范畴从当前主导AI
    的头像 发表于 04-21 10:55 1960次阅读

    AI模型微调企业项目实战课

    业、守规矩、可完全掌控的专属 AI 底座,已经成为头部企业的隐性共识。 二、 核心破局:微调——用极低成本撬动专业能力 很多企业对“自主训练大模型”存在误解,认为这需要像顶级科技巨头那样,耗费千万算力
    发表于 04-16 18:48

    基于openEuler平台的CPUGPU与FPGA异构加速实战

    随着 AI、视频处理、加密和高性能计算需求的增长,单一 CPU 已无法满足低延迟、高吞吐量的计算需求。openEuler 作为面向企业和云端的开源操作系统,在 多样算力支持 方面表现出色,能够高效调度 CPU
    的头像 发表于 04-08 11:02 878次阅读
    基于openEuler平台的<b class='flag-5'>CPU</b>、<b class='flag-5'>GPU</b>与FPGA异构加速实战

    如何在 VisionFive v2 上使用外部 GPU

    如果旧的 amd gpu 在 VisionFive V2 上运行,我想使用带有开源 amd 驱动程序的 amd gpu。我需要什么以及如何将
    发表于 03-13 06:38

    解析ISL62776:AMD CPU/GPU核心电源的理想之选

    解析ISL62776:AMD CPU/GPU核心电源的理想之选 在如今的电子设备中,CPUGPU的性能不断提升,对电源管理的要求也越来越高
    的头像 发表于 02-04 16:30 434次阅读

    Robotec.aiAMD Silo AI的合作实践

    AMD Silo AI 正与领先的机器人应用仿真平台开发商 Robotec.ai 合作,优化和扩展基于 AMD GPU 和 ROCm 软件堆
    的头像 发表于 01-28 16:23 895次阅读

    AMD 推出锐龙 AI 嵌入式处理器产品组合,为汽车、工业和物理 AI 领域提供 AI 驱动的沉浸式体验

    新闻亮点 · 全新 AMD 锐龙 AI 嵌入式 P100 和 X100 系列处理器融入了高性能“Zen 5”CPU 核心、AMD RDNA 3.5
    的头像 发表于 01-07 14:30 688次阅读
    <b class='flag-5'>AMD</b> 推出锐龙 <b class='flag-5'>AI</b> 嵌入式处理器产品组合,为汽车、工业和物理 <b class='flag-5'>AI</b> 领域提供 <b class='flag-5'>AI</b> 驱动的沉浸式体验

    AI硬件全景解析:CPUGPU、NPU、TPU的差异化之路,一文看懂!​

    CPU作为“通用基石”,支撑所有设备的基础运行;GPU凭借并行算力,成为AI训练与图形处理的“主力”;TPU在Google生态中深耕云端大模型训练;NPU则让
    的头像 发表于 12-17 17:13 2352次阅读
    <b class='flag-5'>AI</b>硬件全景解析:<b class='flag-5'>CPU</b>、<b class='flag-5'>GPU</b>、NPU、TPU的差异化之路,一文看懂!​

    AMD推出 EPYC 嵌入式 2005 系列处理器 满足长期部署需求

    AMD 推出 AMD EPYC(霄龙)嵌入式 2005 系列处理器正是为了满足这些不断演进的需求。该系列处理器以小巧的 BGA(球栅阵列)封装,为需要全天候( 24/7 )运行的网络、存储和工业基础设施系统提供高性能、高能效以及
    的头像 发表于 12-17 09:53 7.3w次阅读
    <b class='flag-5'>AMD</b>推出 <b class='flag-5'>EPYC</b> 嵌入式 2005 系列处理器 满足长期部署需求

    AMD Vitis AI 5.1测试版发布

    AMD Vitis AI 5.1全新发布——新增了对 AMD Versal AI Edge 系列神经网络处理单元 (NPU) 的支持。Vitis A
    的头像 发表于 10-31 12:46 1013次阅读

    AI模型的配置AI模型该怎么做?

    STM32可以跑AI,这个AI模型怎么搞,知识盲区
    发表于 10-14 07:14

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片的需求和挑战

    的工作吗? 从书中也了解到了AI芯片都有哪些?像CPUGPU、FPGA、ASIC都是AI芯片。 其他的还是知道的,FPGA属于AI芯片这个
    发表于 09-12 16:07

    AMD实现首个基于台积电N2制程的硅片里程碑

    代号为“Venice”的新一代AMD EPYC CPU是首款基于台积电新一代N2制程的高性能计算产品。   AMD表示,其代号为“Venice”的新一代
    的头像 发表于 05-06 14:46 921次阅读
    <b class='flag-5'>AMD</b>实现首个基于台积电N2制程的硅片里程碑