浪潮信息NF5468服务器LLaMA训练性能

浪潮信息宣布旗下NF5468系列AI服务器率先支持英伟达最新推出的L40S GPU，可为人工智能大模型训练和推理、元宇宙及图形视频处理等应用提供强大算力。实际测试表明，搭载8颗NVIDIA L40S的浪潮信息NF5468服务器大幅提升了LLaMA大模型的微调训练性能。目前该产品已具备交付能力，客户可以进行下单采购。

本次浪潮信息推出的算力系统是兼具训练和推理能力的NF5468系列AI服务器，包括NF5468M6、NF5468A5、NF5468M7、NF5468A7等型号，产品可以在4U空间内搭载2颗高性能通用处理器、8张L40S GPU加速器及多颗高速互联网络，从而满足大模型计算对高算力、高互联的极致性能需求。在软件上，产品支持浪潮信息最新推出的OGAI大模型智算软件栈，为客户提供高效的大模型生产力支撑。

针对业界广泛使用的LLaMA开源大型语言模型，浪潮信息NF5468服务器搭载8颗L40S GPU进行了大模型训练性能测试，得益于浪潮信息在NF5468服务器的优秀设计和大模型算法上的专业经验，L40S GPU的强大性能得以充分发挥，实际测试数据表明LLaMA大模型微调训练性能优异。

浪潮信息NF5468系列AI服务器搭载L40S GPU可以很好地完成LLaMA大模型训练任务，并具备良好的性能扩展，将帮助客户迅速部署高性能的AI算力系统、采纳强大的GPU加速器和领先的软件生态，加速生成式AI的产业创新和发展。

审核编辑：汤梓红