0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

摩尔线程与智谱AI完成大模型性能测试与适配

CHANBAEK 来源:网络整理 2024-06-14 16:40 次阅读

近日,摩尔线程与智谱AI人工智能领域开展了一轮深入的合作,共同对GPU大模型进行了适配及性能测试。此次测试不仅涵盖了大模型的推理能力,还涉及了基于摩尔线程夸娥(KUAE)千卡智算集群的大模型预训练,旨在全面评估摩尔线程GPU在大模型应用中的性能表现。

在推理性能测试中,摩尔线程自研的全功能GPU展现出了卓越的性能。与基准对比产品RTX 3090和RTX 4090相比,摩尔线程的GPU在全部测试用例中均优于RTX 3090,而在多batch情况下更是超越了RTX 4090。这一结果充分证明了摩尔线程GPU在推理能力上的出色表现,为用户提供了更加高效、准确的计算体验。

在训练性能测试中,摩尔线程夸娥千卡智算集群同样展现出了强大的性能。测试结果显示,夸娥千卡智算集群的训练精度与A100集群误差在1%以内,这一数据足以证明其在训练过程中的精确度和稳定性。同时,夸娥千卡智算集群的性能扩展系数超过90%,意味着在分布式计算环境下,该集群能够充分利用各节点的计算能力,实现高效的并行计算。此外,模型算力利用率(MFU)与A100集群相当,进一步证明了夸娥千卡智算集群在大模型训练中的高效性。

此次测试的成功不仅为摩尔线程和智谱AI的合作奠定了坚实的基础,也为双方在人工智能领域的深入探索提供了有力的技术支撑。未来,双方将继续携手合作,共同推动GPU大模型在更多领域的应用和发展。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    87

    文章

    27812

    浏览量

    265305
  • 人工智能
    +关注

    关注

    1785

    文章

    45396

    浏览量

    232745
  • 摩尔线程
    +关注

    关注

    1

    文章

    170

    浏览量

    4200
收藏 人收藏

    评论

    相关推荐

    国产千卡GPU集群完成大模型训练测试,极具高兼容性和稳定性

    卡集群的方式成为了必然的选择。   2023年底,摩尔线程推出首个全国产千卡千亿模型训练平台“摩尔线程KUAE智算中心”。
    的头像 发表于 06-11 07:50 2688次阅读
    国产千卡GPU集群<b class='flag-5'>完成大</b><b class='flag-5'>模型</b>训练<b class='flag-5'>测试</b>,极具高兼容性和稳定性

    摩尔线程和乐创能源签署战略合作协议

    近日,摩尔线程和乐创能源签署了战略合作协议,双方将聚焦能源大模型的创新与应用,围绕新能源领域的电池、新能源发电、负荷管理、需求侧响应等产品技术方向,共同研发能源大模型。依托
    的头像 发表于 07-11 14:35 304次阅读

    摩尔线程与羽人科技携手完成7B大模型训练测试

    近日,摩尔线程与羽人科技联合宣布了一项重要成果:双方已成功实现夸娥(KUAE)千卡智算集群与羽人系列模型解决方案的训练兼容适配。这一成果不仅标志着两大技术巨头在人工智能领域的深度合作取
    的头像 发表于 06-14 16:33 275次阅读

    摩尔线程与师者AI携手完成70亿参数教育AI模型训练测试

    近日,国内知名的GPU制造商摩尔线程与全学科教育AI模型“师者AI”联合宣布,双方已成功完成
    的头像 发表于 06-14 16:31 336次阅读

    摩尔线程和滴普科技完成大模型训练与推理适配

    近日,摩尔线程与滴普科技宣布了一项重要合作成果。摩尔线程的夸娥(KUAE)千卡智算集群与滴普科技的企业大模型Deepexi已
    的头像 发表于 05-30 10:14 280次阅读

    摩尔线程千卡智算集群与滴普企业大模型完成训练及推理适配

    近日,摩尔线程与国内领先的数据智能服务商滴普科技共同宣布,摩尔线程夸娥(KUAE)千卡智算集群与滴普企业大模型Deepexi已
    的头像 发表于 05-29 10:28 242次阅读
    <b class='flag-5'>摩尔</b><b class='flag-5'>线程</b>千卡智算集群与滴普企业大<b class='flag-5'>模型</b>已<b class='flag-5'>完成</b>训练及推理<b class='flag-5'>适配</b>

    摩尔线程与无问芯穹在国产GPU上首次实现大模型实训

    近日,摩尔线程与无问芯穹共同宣布,双方已正式完成基于国产全功能GPU千卡集群的3B规模大模型实训。这款名为“MT-infini-3B”的模型
    的头像 发表于 05-27 10:59 409次阅读

    摩尔线程与无问芯穹宣布完成基于GPU千卡集群的3B规模大模型实训

    摩尔线程联合无问芯穹宣布,双方已在本周正式完成基于国产全功能GPU千卡集群的3B规模大模型实训。
    的头像 发表于 05-27 10:44 264次阅读
    <b class='flag-5'>摩尔</b><b class='flag-5'>线程</b>与无问芯穹宣布<b class='flag-5'>完成</b>基于GPU千卡集群的3B规模大<b class='flag-5'>模型</b>实训

    摩尔线程与Reportify联手加速金融大模型创新应用

    近日,国内创新的AI投资研究问答搜索引擎Reportify成功集成了摩尔线程自研大语言模型MUSAChat的推理API云服务,并已正式上线,运行效果良好。
    的头像 发表于 05-22 18:14 1084次阅读

    摩尔线程携手憨猴集团,深化AI算力战略合作,成功实现大模型分布式训练

    摩尔线程与憨猴科技集团日前宣布,采用搭载摩尔线程的夸娥(KUAE)千卡智算集群,已成功完成了多个大模型
    的头像 发表于 05-17 17:24 430次阅读

    摩尔线程携手憨猴集团,共同探索国产AI算力的新应用场景与落地实践

    摩尔线程与憨猴科技集团有限公司(简称:憨猴集团)近日宣布,基于摩尔线程的夸娥(KUAE)千卡智算集群,憨猴集团已成功完成了7B、34B、70
    的头像 发表于 05-17 15:08 262次阅读

    摩尔线程助力AI模型训练与计算升级,共建美好数字化未来

    此外,在中关村国际技术交易大会高精尖技术产品首发会上,摩尔线程与无问芯穹联合宣布,双方正致力于开发基于夸娥千卡智算集群的“MT-infini-3B”合作大模型摩尔
    的头像 发表于 04-28 16:42 649次阅读

    摩尔线程与无问芯穹联手开启千亿大模型服务新篇章

    3月31日,无问芯穹AI算力优化论坛暨产品发布会在上海成功举办,重磅发布了“无穹Infini-AI”大模型开发与服务平台,并宣布与国内AI芯片领军企业
    的头像 发表于 04-01 11:11 415次阅读
    <b class='flag-5'>摩尔</b><b class='flag-5'>线程</b>与无问芯穹联手开启千亿大<b class='flag-5'>模型</b>服务新篇章

    摩尔线程携手RealLink共同完成UE5在国产显卡上的首次适配

    近期,摩尔线程携手虚幻引擎技术解决方案厂商蕊霖(Real-Link),共同完成了UE5在国产显卡上的首次适配,标志着RealLink在UE5国产适配
    的头像 发表于 09-13 10:13 1299次阅读

    完成适配!曦云C500在智AI升级版大模型上充分兼容、高效稳定运行

    适配测试结果显示,曦云C500在智AI的升级版大模型上充分兼容、高效稳定运行。 沐曦旗舰产品曦云C500基于自主研发的高
    的头像 发表于 08-23 10:38 4194次阅读