0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

64核+高内存带宽!英特尔发布第五代至强可扩展处理器,加速AI原生应用落地

章鹰观察 来源:电子发烧友原创 作者:章鹰 2023-12-19 09:45 次阅读
电子发烧友网报道 文/章鹰)12月15日下午,在2023年英特尔新品发布会上,英特尔正式揭开了第五代至强可扩展处理器(代号EmeraldRapids)的神秘面纱。在会上,英特尔的合作伙伴京东云、阿里云和火山引擎也分享了其自身使用第五代至强开发新品的案例。


这款产品是英特尔最强AI性能的CPU,采用了Intel7工艺,该处理器拥有多达64 核,具备8 条 DDR5 通道,支持高达5,600 MT/s的传输速率,三级缓存是上一代产品的近 3 倍,且采用英特尔超级通道互联2.0 以增加跨插槽内带宽,提供高达20 GT/s的传输。


据悉,第五代至强可扩展处理器比较上一代产品,可以处理更多的AI工作负载,其迭代性能相较于上一代产品提升了21%,而在AI推理性能上,则拥有高达42%的提升,其内存带宽也提升了16%。相较上一代产品,第五代英特尔至强可扩展处理器可在进行通用计算时将整体性能提升高达21%,并在一系列客户工作负载中将每瓦性能提升高达36%。对于遵循典型的五年更新周期并从更前一代处理器进行升级的客户而言,总体拥有成本最多降低77%。


京东云服务器搭载第五代至强,整机提升123%,大模型推理能力提升51%!



京东科技京东云事业部硬件架构总监董可新表示,基于英特尔新一代处理器的京东云自研服务器全面支持京东双十一大促。评测结果显示,新一代至强可扩展服务器平台比上一代整体提升了23%,一方面得益于新一代处理器更高的内存频率,以及更大的L3 Cache等新的技术特性,另一方面得益于我们在和英特尔联合定制的新一代CPU中,针对京东各个业务场景的性能需求进行了针对性的性能优化。

在AI应用方面,京东云服务器在通用的AI视觉类模型ResNet50推理性能测试中,比上一代平台整体性能提升了38%。在通用的大语言模型Llama2-13B模型推理性能测试中,与上一代相比,提升高达51%,拥有出色的整体优化效果。


在刚刚过去的双十一中,京东商城上超过60个品牌的营销额突破了10亿。在大促期间,每秒用户访问峰值同比提升了170%,京东智能客服为超过14亿次的用户提供了累计智能咨询的服务。他指出,特别在智能营销方面,京东实现了能够根据产业洞察及带货思维进行服务的数字人(其成本不到真人的十分之一),以及其他成本降低达90%的生成式AI应用。

英特尔和多家合作伙伴打造第五代Xeon生态合作圈

此外,数据中心人工智能集团副总裁兼中国区总经理陈葆立介绍了英特尔和百度云合作的最新成果。在针对大规模推理的早期测试,双方使用700亿参数的Llama 2开源大模型进行推理,采用了4台内含第五代至强的服务器,并通过100G的高速网络联合在一起。结果是,相比单台的服务器,其性能提升了2.85倍。从整个性能上看,在处理Llama 2 700亿模型推理时,时间可以控制在87毫秒以内。

阿里云则展示了基于英特尔第五代至强可扩展处理器,推出新一代云实例。基于英特尔第五代至强芯片,阿里云第八代计算实例迎来了全面的计算升级。英特尔CPU在L3 Cache的3倍性能提升和内存带宽16%的提升,在媒体处理、网站应用和AI应用等场景性能提升20%以上。

通义千问720亿大模型近期在开源社区Hugging Face大模型排行榜上问鼎。阿里云非常重视云上用户的数据安全,结合英特尔TDX技术,阿里云第八代机密计算实例可以保障用户在整个AI推理过程中,模型和数据全流程的数据安全。用户可以在英特尔AMX技术的加持下,在阿里云第八代实例上轻松部署通义千问。


陈葆立总结说:“以ChatGPT为例的生成式人工智能带来了一个全新的火爆趋势。我们看到非常多的中国本土企业,包括众多软、硬件公司正在加速推进AI在各行各业的应用和落地。目前在国内,已有超过20家的硬件伙伴,超过7家云服务商基于第五代英特尔至强可扩展处理器,准备好了全新的服务器和云服务。对中国的终端用户来说,无论是对类型、规模以及应用有着如何多样化的需求,都将拥有丰富的选择。英特尔可靠的产业伙伴们,将会为用户提供全面的产品以及服务。”

本文由电子发烧友原创,转载请注明以上来源。微信号zy1052625525。需入群交流,请添加微信elecfans999,投稿爆料采访需求,请发邮箱zhangying@huaqiu.com。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英特尔
    +关注

    关注

    60

    文章

    9421

    浏览量

    168825
  • AI
    AI
    +关注

    关注

    87

    文章

    26443

    浏览量

    264044
  • 阿里云
    +关注

    关注

    3

    文章

    883

    浏览量

    42614
收藏 人收藏

    评论

    相关推荐

    第五代英特尔至强处理器AI特化的通用服务器CPU

    计算性能的同时,也新增了AI相关的新指令集,诸如AXM、AVX等。 第五代至强扩展处理器架构剖析 2023年年底
    的头像 发表于 03-18 08:14 2833次阅读
    <b class='flag-5'>第五代</b><b class='flag-5'>英特尔</b><b class='flag-5'>至强</b><b class='flag-5'>处理器</b>,<b class='flag-5'>AI</b>特化的通用服务器CPU

    英特尔至强处理器优化升级,助力打造未来高能效数据中心

    英特尔最新发布第五代至强扩展处理器,拥有多达64
    的头像 发表于 02-26 17:39 315次阅读

    第五代英特尔至强扩展处理器以强劲性能,打造更“全能”的计算

           随着第五代英特尔至强扩展处理器(以下简称“第五代
    的头像 发表于 01-19 15:40 307次阅读

    H3C UIS超融合方案采用第五代英特尔至强扩展处理器

    超融合是软件定义时代,企业构建基础设施的卓越选择。受益于第五代英特尔 至强扩展处理器的性能优势,我们增强了 H3C UIS 超融合方案在
    的头像 发表于 01-13 10:54 745次阅读
    H3C UIS超融合方案采用<b class='flag-5'>第五代</b><b class='flag-5'>英特尔</b><b class='flag-5'>至强</b>可<b class='flag-5'>扩展</b><b class='flag-5'>处理器</b>

    英特尔专家为您揭秘第五代英特尔® 至强® 可扩展处理器如何为AI加速

    近日,英特尔发布第五代至强扩展处理器,尤其是其“为 A
    的头像 发表于 12-23 12:20 448次阅读

    宝德服务器全面升级到第五代英特尔®至强®平台

    发布全新一代基于第五代英特尔®至强®可扩展处理器的宝德服务器。   卓越性能,新一代宝德服务器为
    的头像 发表于 12-21 16:12 340次阅读
    宝德服务器全面升级到<b class='flag-5'>第五代</b><b class='flag-5'>英特尔</b>®<b class='flag-5'>至强</b>®平台

    64核+高内存带宽英特尔发布第五代至强服务器,加速AI原生应用落地

    12月15日下午,在2023年英特尔新品发布会上,英特尔正式揭开了第五代至强扩展
    的头像 发表于 12-20 00:26 1402次阅读

    第五代英特尔至强扩展处理器 AI 性能大幅提升,英特尔加注推动人工智能无处不在

           今日,在以“AI 无处不在 创芯无所不及”为主题的 2023 英特尔新品发布会暨 AI 技术创新派对上,英特尔正式推出
    的头像 发表于 12-18 17:22 436次阅读
    <b class='flag-5'>第五代</b><b class='flag-5'>英特尔</b><b class='flag-5'>至强</b>可<b class='flag-5'>扩展</b><b class='flag-5'>处理器</b> <b class='flag-5'>AI</b> 性能大幅提升,<b class='flag-5'>英特尔</b>加注推动人工智能无处不在

    英特尔推出新一代强大产品, 加速实现 “AI 无处不在 ”

    英特尔® 酷睿™ Ultra 和第五代英特尔® 至强® 可扩展处理器丰富了
    发表于 12-16 16:27 254次阅读
    <b class='flag-5'>英特尔</b>推出新一代强大产品, <b class='flag-5'>加速</b>实现 “<b class='flag-5'>AI</b> 无处不在 ”

    第五代英特尔至强扩展处理器,为AI加速而生

    今日,在以“AI无处不在 创芯无所不及”为主题的2023英特尔新品发布会暨AI技术创新派对上,英特尔正式推出
    的头像 发表于 12-16 16:15 237次阅读
    <b class='flag-5'>第五代</b><b class='flag-5'>英特尔</b><b class='flag-5'>至强</b>可<b class='flag-5'>扩展</b><b class='flag-5'>处理器</b>,为<b class='flag-5'>AI</b><b class='flag-5'>加速</b>而生

    AI 无处不在,英特尔酷睿Ultra 和第五代英特尔至强扩展处理器正式发布

    英特尔  酷睿 Ultra处理器第五代英特尔   至强   可扩展
    的头像 发表于 12-16 16:05 389次阅读
    <b class='flag-5'>AI</b> 无处不在,<b class='flag-5'>英特尔</b>酷睿Ultra 和<b class='flag-5'>第五代</b><b class='flag-5'>英特尔</b><b class='flag-5'>至强</b>可<b class='flag-5'>扩展</b><b class='flag-5'>处理器</b>正式<b class='flag-5'>发布</b>

    第五代英特尔至强扩展处理器,为AI加速而生

    今日,在以“AI无处不在 创芯无所不及”为主题的2023英特尔新品发布会暨AI技术创新派对上,英特尔正式推出
    发表于 12-16 15:53 191次阅读
    <b class='flag-5'>第五代</b><b class='flag-5'>英特尔</b><b class='flag-5'>至强</b>可<b class='flag-5'>扩展</b><b class='flag-5'>处理器</b>,为<b class='flag-5'>AI</b><b class='flag-5'>加速</b>而生

    英特尔发布酷睿Ultra和第五代至强扩展处理器

    战略的发布,以及英特尔 酷睿 Ultra处理器第五代英特尔 至强
    的头像 发表于 12-16 15:23 768次阅读

    英特尔发布第五代至强扩展处理器:性能和能效大幅提升,AI 加速

    此外,至强扩展处理器被誉为行业首屈一指的内置AI加速器数据中心处理器,全新
    的头像 发表于 12-15 11:02 480次阅读

    英特尔第五代、第六代处理器相关参数曝光

    日前有网友分享了英特尔第五代“Emerald Rapids”、第六代“Granite Rapids”至强处理器的相关规格参数。 而从这个消息可以看到,
    的头像 发表于 09-08 09:40 676次阅读