浪潮信息宣布旗下NF5468系列AI服务器率先支持英伟达最新推出的L40S GPU,可为人工智能大模型训练和推理、元宇宙及图形视频处理等应用提供强大算力。实际测试表明,搭载8颗NVIDIA L40S的浪潮信息NF5468服务器大幅提升了LLaMA大模型的微调训练性能。目前该产品已具备交付能力,客户可以进行下单采购。
本次浪潮信息推出的算力系统是兼具训练和推理能力的NF5468系列AI服务器,包括NF5468M6、NF5468A5、NF5468M7、NF5468A7等型号,产品可以在4U空间内搭载2颗高性能通用处理器、8张L40S GPU加速器及多颗高速互联网络,从而满足大模型计算对高算力、高互联的极致性能需求。在软件上,产品支持浪潮信息最新推出的OGAI大模型智算软件栈,为客户提供高效的大模型生产力支撑。
针对业界广泛使用的LLaMA开源大型语言模型,浪潮信息NF5468服务器搭载8颗L40S GPU进行了大模型训练性能测试,得益于浪潮信息在NF5468服务器的优秀设计和大模型算法上的专业经验,L40S GPU的强大性能得以充分发挥,实际测试数据表明LLaMA大模型微调训练性能优异。
浪潮信息NF5468系列AI服务器搭载L40S GPU可以很好地完成LLaMA大模型训练任务,并具备良好的性能扩展,将帮助客户迅速部署高性能的AI算力系统、采纳强大的GPU加速器和领先的软件生态,加速生成式AI的产业创新和发展。
审核编辑:彭菁
-
gpu
+关注
关注
28文章
5259浏览量
136039 -
浪潮
+关注
关注
1文章
490浏览量
25479 -
人工智能
+关注
关注
1819文章
50290浏览量
266826 -
英伟达
+关注
关注
23文章
4112浏览量
99597 -
AI服务器
+关注
关注
3文章
188浏览量
5566
原文标题:浪潮信息AI服务器率先支持L40S, 首发LLaMA训练优异性能
文章出处:【微信号:浪潮AIHPC,微信公众号:浪潮AIHPC】欢迎添加关注!文章转载请注明出处。
发布评论请先 登录
从GPU到ASIC,AI服务器电源芯片爆发!
GPU猛兽袭来!HBM4、AI服务器彻底引爆!
GPU不是AI的唯一解:英伟达用Groq LPU证明,推理赛道需要“另一条腿”
英伟达GPU直流供电架构与基本半导体SiC MOSFET在AI服务器PSU中的应用价值分析
罗姆强势入局AI服务器800VDC电源方案 原创
Microchip推出模型语境协议(MCP)服务器,助力AI驱动的产品数据访问
浪潮信息发布"元脑SD200"超节点,面向万亿参数大模型创新设计
继HBM之后,英伟达带火又一AI内存模组!颠覆AI服务器与PC
飞利信与浪潮信息达成战略合作
总功率超198kW,AI服务器电源对元器件提出了哪些要求?
硅谷GPU云服务器是什么意思?使用指南详解
峰值效率98%,纳微12kW AI数据中心服务器电源,支持英伟达Backwell GPU
GPU 维修干货 | 英伟达 GPU H100 常见故障有哪些?
浪潮信息NF5468系列AI服务器率先支持英伟达最新推出的L40S GPU
评论