0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

飞腾CPU携手DeepSeek大模型,双芯联动确保全系列稳定运行

Phytium飞腾 来源:Phytium飞腾 2025-02-10 09:31 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

近日,飞腾腾云S5000C和飞腾腾锐D3000成功实现对DeepSeek全系列大模型的端到端支持,覆盖数据中心和终端场景,本地部署的推理效率与国外同类产品架构解决方案相当。

近年来,飞腾积极拥抱AI浪潮,致力于推动国产芯片与AI技术的深度融合,去年7月,飞腾携手生态伙伴打造并发布了 全栈国产化智算中心解决方案,为众多行业提供从端到云的智能化算力服务。2024年,DeepSeek-V2.5 234B大模型便已在飞腾腾云S5000C平台成功实现稳定运行。基于飞腾腾云S5000C的设备搭配8块国产AI卡,其整体性能可达到国外平台性能的80%左右,已支撑行业用户在项目中使用。

今年春节期间,DeepSeek发布了最新的DeepSeek-V3和R1版本后,凭借其卓越的性能和极高的性价比,迅速成为科技领域的焦点,为开发者和企业提供了更高效、更灵活的私有化部署解决方案。飞腾技术团队第一时间在AI实验室进行了其在飞腾腾云S5000C平台和飞腾腾锐D3000上本地部署验证,形成整体解决方案,助力用户构建端到端国产平台DeepSeek大模型智算环境。

在数据中心侧,基于飞腾腾云S5000C的服务器可以与多款AI加速卡配合实现DeepSeek蒸馏版和全量版部署。飞腾AI实验室在单机8卡服务器平台已进行蒸馏版DeepSeek-R1-Distill-Llama-70B版本测试,实测推理速度可达到22tokens/s,本地部署的推理效率与国外同类产品架构解决方案相当。完整版DeepSeek R1 671B模型采用分布式推理框架,基于四机32卡AI服务器集群运行可部署成功,为企业级私有化部署提供完善的软硬件解决方案。

在用户终端侧,基于飞腾腾锐D3000的台式机可以本地部署DeepSeek-R1 7B蒸馏版模型,搭配1张国产推理卡,实现AI PC能力,助力用户建立安全可靠的本地知识助手。

飞腾平台已实现端到端支持DeepSeek全系列、众多开源和国产头部大模型的本地化部署,为企业级和个人应用提供全国产化、软硬一体、性价比高、安全、开放的全栈解决方案,与行业客户和生态伙伴一同助力行业的数字化转型和智能化升级!

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 飞腾CPU
    +关注

    关注

    0

    文章

    12

    浏览量

    2009
  • DeepSeek
    +关注

    关注

    1

    文章

    798

    浏览量

    1747

原文标题:飞腾CPU × DeepSeek大模型,双芯加持全系列稳跑

文章出处:【微信号:TJ_PHYTIUM,微信公众号:Phytium飞腾】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    飞腾助力“疆电入渝”首批机组投产发电

    飞腾作为核心算力基石,携手中国华电旗下南自维美德为项目提供了基于飞腾 CPU 自主可控 DCS、NCS 以及全系列电气保护解决方案,助力 1
    的头像 发表于 06-27 11:45 453次阅读

    如何基于Android 14在i.MX95 EVK上运行Deepseek-R1-1.5B和性能

    图标: 3. Download deepseek-R1 models through PocketPal 1. 打开 pocketPal 并单击右下角的“转到模型”按钮。 2. 确保您可以访问
    发表于 04-04 06:59

    RK3588开发板上部署DeepSeek-R1大模型的完整指南

    DeepSeek作为国产AI大数据模型的代表,凭借其卓越的推理能力和高效的文本生成技术,在全球人工智能领域引发广泛关注。DeepSeek-R1作为该系列最新迭代版本,实现了长文本处理效
    发表于 02-27 16:45

    源诚技术M720智能模组成功运行DeepSeek模型

    DeepSeek以“开源+低成本+高性能”三大利器席卷全球AI领域。源诚技术研发的基于高通骁龙680(SM6225)平台的智能模组M720,已成功实现DeepSeek模型稳定
    的头像 发表于 02-24 15:12 643次阅读

    移远通信边缘计算模组成功运行DeepSeek模型

    DeepSeek模型稳定运行,并顺利完成了针对性的微调优化。 DeepSeek模型的这一成功
    的头像 发表于 02-17 09:56 771次阅读

    添越智创基于 RK3588 开发板部署测试 DeepSeek 模型全攻略

    应用领域展现出无可比拟的性能优势。 八核处理器 :具备强大的并行计算能力,无论是复杂的数据处理、高强度的模型运算,还是系统资源的合理调度,都能轻松应对,确保开发板在运行各类 AI 程序时流畅
    发表于 02-14 17:42

    了解DeepSeek-V3 和 DeepSeek-R1两个大模型的不同定位和应用选择

    DeepSeek-V3 和 DeepSeek-R1 是深度求索公司(DeepSeek)推出的两个不同定位的大模型,其核心差异主要体现在目标场景、能力侧重和技术优化方向上。以下是二者的实
    发表于 02-14 02:08

    天数智加速DeepSeek全系列模型适配

    天数智携手合作伙伴,以惊人的速度推进DeepSeek全系列模型的适配与上线工作。目前,多款DeepS
    的头像 发表于 02-10 15:30 991次阅读

    飞腾CPU成功支持DeepSeek全系列模型

    成功实现了对DeepSeek全系列模型的端到端支持。 这一成就不仅覆盖了数据中心场景,还全面扩展到了终端场景,标志着国产CPU在AI大模型
    的头像 发表于 02-10 14:26 638次阅读

    中软国际科创中心上线DeepSeek模型

    近日,中软国际科创中心以“DeepSeek+昇腾”为引擎,紧跟行业趋势,将DeepSeek全参模型满血版部署在全国产化智算环境中,实现671B参数的DeepSeek
    的头像 发表于 02-08 18:02 1358次阅读

    龙芯3号CPU成功运行DeepSeek R17B模型

    龙芯中科官方近日郑重宣布,搭载其自主研发的龙芯3号CPU的设备已经顺利启动并成功运行DeepSeek R17B模型。这一里程碑式的成就标志着国产芯片与AI大
    的头像 发表于 02-08 09:15 813次阅读

    在龙芯3a6000上部署DeepSeek 和 Gemma2大模型

    serve 2.运行deepseek-r1大模型 到以下网站选择不同参数的大模型 https://ollama.com/library/deep
    发表于 02-07 19:35

    龙芯处理器成功运行DeepSeek模型

    近日,搭载龙芯3号CPU的设备成功启动运行DeepSeek R1 7B模型,实现本地化部署,性能卓越,成本优异,可为广大用户提供更快、更强、更省的训推体验。这一突破标志着国产芯片与AI
    的头像 发表于 02-07 16:03 601次阅读
    龙芯处理器成功<b class='flag-5'>运行</b><b class='flag-5'>DeepSeek</b>大<b class='flag-5'>模型</b>

    云天励飞上线DeepSeek R1系列模型

    -R1-Distill-Llama-70B大模型DeepSeek V3/R1 671B MoE大模型也在有序适配中。适配完成后,DeepEdge10芯片平台将在端、边、云全面支持DeepSe
    的头像 发表于 02-06 10:39 675次阅读
    云天励飞上线<b class='flag-5'>DeepSeek</b> R1<b class='flag-5'>系列</b><b class='flag-5'>模型</b>

    飞腾CPU产品在油气工控领域新突破

    基于飞腾CPU研发的信创工业主机及工控应用系统,在中国石化东北油气分公司大岭站经过半年的稳定运行,日前顺利通过验收。该案例是飞腾
    的头像 发表于 01-14 14:31 538次阅读