0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

移远通信边缘计算模组成功运行DeepSeek模型,以领先的工程能力加速端侧AI落地

移远通信 2025-02-12 19:03 次阅读

近日,国产大模型DeepSeek凭借其“开源开放、高效推理、端侧友好”的核心优势,迅速风靡全球。移远通信基于边缘计算模组SG885G,已成功实现DeepSeek模型的稳定运行,并完成了针对性微调。


目前,该模型正在多款智能终端上进行深入测试与优化。移远通信将凭借其卓越的工程化能力,加速端侧AI技术在各行各业的规模化应用与普及。

DeepSeek:AI模型创新先锋

DeepSeek之所以火爆全球,源于其在模型架构、蒸馏技术以及强化学习等方面的突破性创新。


完整版DeepSeek-V3模型采用创新的MoE(混合专家)架构,拥有6,710亿参数,每秒可处理60个Token,擅长处理长文档分析、多模态推理等复杂任务和高精度场景。其每层包含256个路由专家和1个共享专家,每个Token仅激活8个专家,极大地提升了学习效率和灵活性,显著降低了训练和推理成本,同时加速了Tokens生成。


为解决小推理模型Self-play学习的不足,DeepSeek-R1通过高效蒸馏技术,将大模型的推理能力迁移到更小、更高效的版本中。这一突破使其小尺寸版本在保持卓越性能的同时,显著降低了模型体积和计算资源需求,成为端侧部署的理想选择。


同时,DeepSeek-R1-Zero实验性版本证明了仅通过强化学习(Reinforcement Learning,RL)、无需监督式微调,大模型也能具备强大的推理能力,为AI模型的训练开辟了新思路。

DeepSeek小尺寸版本:端侧部署的理想选择

DeepSeek-R1版本专注于强化学习技术路线,推理能力强、性价比突出,基于该版本开发的系列小尺寸蒸馏模型,参数范围覆盖1.5B至70B,为开发者提供了高性能、低成本的大模型部署与开发解决方案,将有力推动端侧AI的商业化应用。


简化后的小模型从大模型中继承了强大的AI能力,尽管参数量减少,但性能依然出色。由于计算量大幅降低,减少了内存和计算资源的消耗,因此特别适合资源有限的端侧设备。同时,推理速度显著提升,能够满足端侧设备对实时性的需求。此外,小模型体积更小,适配性更强,更容易在各种行业终端和边缘计算设备上集成和运行。尽管模型压缩,但通过蒸馏技术,小模型仍能保持较高的精度,确保任务效果不受影响。

移远通信:以领先的工程能力加速端侧AI落地

在众多厂商仍在探索如何支持DeepSeek模型之际,移远通信已率先取得突破,其搭载高通QCS8550平台的边缘计算模组SG885G,成功实现了DeepSeek-R1蒸馏小模型的稳定运行。实测数据显示,其生成Tokens的速度超过每秒40个Tokens,且未来随着性能的不断优化,速度还将进一步提升,为智能终端设备带来更强大的AI能力。


同时,移远通信还与行业合作伙伴紧密合作,在机器人、智能座舱、智能工业等客户应用上开展深入测试与优化,为用户提供更为流畅的AI体验。


搭载DeepSeek模型的移远边缘计算模组和解决方案,不仅适用于消费类和工业类机器人领域,还可广泛应用于智能座舱、机器视觉、个性化虚拟助理、平板电脑、老人监护、智能家居、AI玩具及可穿戴设备等多元化场景,为各行业提供强大的AI赋能,例如更自然的语音交互、更精准的图像识别以及更加个性化的服务体验。


此外,在成功实现DeepSeek模型端侧运行的基础上,移远通信还完成了该模型的针对性微调,并应用于自身的大模型解决方案中,为客户提供更精准、更高效的端侧AI服务。这一成果不仅彰显了移远通信在端侧AI领域的技术实力,更体现了其领先的工程化能力,将有力推动AIoT应用的快速发展与落地。


面向亟待接入AI能力的广泛垂直领域,移远通信将持续投入资源,推动更多高、中、入门级边缘计算模组,以及智能座舱、5G、LTE模组和解决方案全面接入DeepSeek等先进模型以及云端大模型,助力物联网设备实现智能化升级,开启万物智联新时代

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    87

    文章

    33377

    浏览量

    273858
  • 移远通信
    +关注

    关注

    6

    文章

    712

    浏览量

    19306
  • 边缘计算
    +关注

    关注

    22

    文章

    3224

    浏览量

    50262
  • DeepSeek
    +关注

    关注

    1

    文章

    747

    浏览量

    918
收藏 人收藏

    评论

    相关推荐

    通信携手高通举办“2025 高通边缘智能创新应用大赛”,助力开发者探索AI创新潜能

    随着边缘计算智能迅猛发展,机器人和各类智能终端为代表的物理智能体正深刻重塑人类的生产生活方式。作为全球
    的头像 发表于 04-20 08:07 159次阅读
    <b class='flag-5'>移</b><b class='flag-5'>远</b><b class='flag-5'>通信</b>携手高通举办“2025 高通<b class='flag-5'>边缘</b>智能创新应用大赛”,助力开发者探索<b class='flag-5'>AI</b>创新潜能

    首创开源架构,天玑AI开发套件让AI模型接入得心应手

    AI巨头强强联手,势必为智能体化AI体验时代按下超级加速键。 AI终端的下一步是“普适智能”,而不是“极限性能”。联发科凭借天玑9400+强悍的
    发表于 04-13 19:52

    AI革命:通信如何用大模型重构人机交互

    ,各类应用纷纷接入DeepSeek,包括搜索引擎、机器人、汽车、智能手机等。通信产品总监王韬在“绽放通信之美—预见
    的头像 发表于 04-03 19:06 328次阅读
    <b class='flag-5'>端</b><b class='flag-5'>侧</b><b class='flag-5'>AI</b>革命:<b class='flag-5'>移</b><b class='flag-5'>远</b><b class='flag-5'>通信</b>如何用大<b class='flag-5'>模型</b>重构人机交互

    AI模型侧部署正当时:远端AI模型解决方案,激活场景智能新范式

    AI技术飞速发展的当下,AI模型的应用正从云端向加速渗透。 作为全球
    发表于 03-27 11:26 145次阅读
    <b class='flag-5'>AI</b>大<b class='flag-5'>模型</b><b class='flag-5'>端</b>侧部署正当时:<b class='flag-5'>移</b>远端<b class='flag-5'>侧</b><b class='flag-5'>AI</b>大<b class='flag-5'>模型</b>解决方案,激活场景智能新范式

    AI模型侧部署正当时:远端AI模型解决方案,激活场景智能新范式

    AI技术飞速发展的当下,AI模型的应用正从云端向加速渗透。作为全球
    的头像 发表于 03-26 19:05 287次阅读
    <b class='flag-5'>AI</b>大<b class='flag-5'>模型</b><b class='flag-5'>端</b>侧部署正当时:<b class='flag-5'>移</b>远端<b class='flag-5'>侧</b><b class='flag-5'>AI</b>大<b class='flag-5'>模型</b>解决方案,激活场景智能新范式

    【幸狐Omni3576边缘计算套件试用体验】DeepSeek 部署及测试

    部署的相关流程,包括模型介绍、部署方案、RKLLM 库、编译和运行、效果演示等。通过板人工智能大模型的部署,展示了该开发板在处理边缘
    发表于 03-21 19:31

    通信智能模组全面接入多模态AI模型,重塑智能交互新体验

    随着千行百业数智化进程的不断加速,多模态AI模型的应用需求不断攀升,图像、语音、视频等多样化的交互方式正逐渐成为推动行业变革的新动力。   3月20日,全球物联网整体解决方案供应商
    发表于 03-21 14:12 180次阅读
    <b class='flag-5'>移</b><b class='flag-5'>远</b><b class='flag-5'>通信</b>智能<b class='flag-5'>模组</b>全面接入多模态<b class='flag-5'>AI</b>大<b class='flag-5'>模型</b>,重塑智能交互新体验

    通信智能模组全面接入多模态AI模型,重塑智能交互新体验

    随着千行百业数智化进程的不断加速,多模态AI模型的应用需求不断攀升,图像、语音、视频等多样化的交互方式正逐渐成为推动行业变革的新动力。3月20日,全球物联网整体解决方案供应商
    的头像 发表于 03-20 19:03 277次阅读
    <b class='flag-5'>移</b><b class='flag-5'>远</b><b class='flag-5'>通信</b>智能<b class='flag-5'>模组</b>全面接入多模态<b class='flag-5'>AI</b>大<b class='flag-5'>模型</b>,重塑智能交互新体验

    AI模组再进化!通信和美格智能在MWC如何放大招?

    落地需要上游模组企业在算法、硬件和应用场景领域推出切实可行的方案提供给客户。 在MWC2025上,国内两家重要的模组企业
    的头像 发表于 03-09 04:33 928次阅读
    <b class='flag-5'>端</b><b class='flag-5'>侧</b><b class='flag-5'>AI</b><b class='flag-5'>模组</b>再进化!<b class='flag-5'>移</b><b class='flag-5'>远</b><b class='flag-5'>通信</b>和美格智能在MWC如何放大招?

    RK3588开发板上部署DeepSeek-R1大模型的完整指南

    -R1与OK3588-C开发板的深度融合,标志着国产AI模型从云端向边缘的延伸。这种“先进算法+定制化芯片”的协同模式,不仅解决了边缘
    发表于 02-27 16:45

    源诚技术M720智能模组成功运行DeepSeek模型

    DeepSeek“开源+低成本+高性能”三大利器席卷全球AI领域。源诚技术研发的基于高通骁龙680(SM6225)平台的智能模组M720,已成功
    的头像 发表于 02-24 15:12 406次阅读

    通信边缘计算模组成功运行DeepSeek模型

    近日,国产大模型DeepSeek凭借其“开源开放、高效推理、友好”的核心竞争力,在全球范围内赢得了广泛关注。
    的头像 发表于 02-17 09:56 615次阅读

    了解DeepSeek-V3 和 DeepSeek-R1两个大模型的不同定位和应用选择

    DeepSeek-R1 更适合电子工程核心工作流,因其在符号数学、代码严谨性、长文档结构化理解上的优势。 二、其他领域专用模型推荐 若需更高精度,可结合以下工具组成混合方案: 1.
    发表于 02-14 02:08

    通信边缘计算模组成功运行DeepSeek模型领先工程能力加速AI落地

    近日,国产大模型DeepSeek凭借其“开源开放、高效推理、友好”的核心优势,迅速风靡全球。
    发表于 02-13 11:32 158次阅读
    <b class='flag-5'>移</b><b class='flag-5'>远</b><b class='flag-5'>通信</b><b class='flag-5'>边缘</b><b class='flag-5'>计算</b><b class='flag-5'>模组成功</b><b class='flag-5'>运行</b><b class='flag-5'>DeepSeek</b><b class='flag-5'>模型</b>,<b class='flag-5'>以</b><b class='flag-5'>领先</b>的<b class='flag-5'>工程</b><b class='flag-5'>能力</b><b class='flag-5'>加速</b><b class='flag-5'>端</b><b class='flag-5'>侧</b><b class='flag-5'>AI</b><b class='flag-5'>落地</b>

    【实测】用全志A733平板搭建一个Deepseek算力平台

    ​ 随着DeepSeek 的蒸馏技术的横空出世, SoC 芯片上运行模型成为可能。那么
    发表于 02-13 10:19