0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

移远通信边缘计算模组成功运行DeepSeek模型,以领先的工程能力加速端侧AI落地

移远通信 2025-02-12 19:03 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

近日,国产大模型DeepSeek凭借其“开源开放、高效推理、端侧友好”的核心优势,迅速风靡全球。移远通信基于边缘计算模组SG885G,已成功实现DeepSeek模型的稳定运行,并完成了针对性微调。


目前,该模型正在多款智能终端上进行深入测试与优化。移远通信将凭借其卓越的工程化能力,加速端侧AI技术在各行各业的规模化应用与普及。

DeepSeek:AI模型创新先锋

DeepSeek之所以火爆全球,源于其在模型架构、蒸馏技术以及强化学习等方面的突破性创新。


完整版DeepSeek-V3模型采用创新的MoE(混合专家)架构,拥有6,710亿参数,每秒可处理60个Token,擅长处理长文档分析、多模态推理等复杂任务和高精度场景。其每层包含256个路由专家和1个共享专家,每个Token仅激活8个专家,极大地提升了学习效率和灵活性,显著降低了训练和推理成本,同时加速了Tokens生成。


为解决小推理模型Self-play学习的不足,DeepSeek-R1通过高效蒸馏技术,将大模型的推理能力迁移到更小、更高效的版本中。这一突破使其小尺寸版本在保持卓越性能的同时,显著降低了模型体积和计算资源需求,成为端侧部署的理想选择。


同时,DeepSeek-R1-Zero实验性版本证明了仅通过强化学习(Reinforcement Learning,RL)、无需监督式微调,大模型也能具备强大的推理能力,为AI模型的训练开辟了新思路。

DeepSeek小尺寸版本:端侧部署的理想选择

DeepSeek-R1版本专注于强化学习技术路线,推理能力强、性价比突出,基于该版本开发的系列小尺寸蒸馏模型,参数范围覆盖1.5B至70B,为开发者提供了高性能、低成本的大模型部署与开发解决方案,将有力推动端侧AI的商业化应用。


简化后的小模型从大模型中继承了强大的AI能力,尽管参数量减少,但性能依然出色。由于计算量大幅降低,减少了内存和计算资源的消耗,因此特别适合资源有限的端侧设备。同时,推理速度显著提升,能够满足端侧设备对实时性的需求。此外,小模型体积更小,适配性更强,更容易在各种行业终端和边缘计算设备上集成和运行。尽管模型压缩,但通过蒸馏技术,小模型仍能保持较高的精度,确保任务效果不受影响。

移远通信:以领先的工程能力加速端侧AI落地

在众多厂商仍在探索如何支持DeepSeek模型之际,移远通信已率先取得突破,其搭载高通QCS8550平台的边缘计算模组SG885G,成功实现了DeepSeek-R1蒸馏小模型的稳定运行。实测数据显示,其生成Tokens的速度超过每秒40个Tokens,且未来随着性能的不断优化,速度还将进一步提升,为智能终端设备带来更强大的AI能力。


同时,移远通信还与行业合作伙伴紧密合作,在机器人、智能座舱、智能工业等客户应用上开展深入测试与优化,为用户提供更为流畅的AI体验。


搭载DeepSeek模型的移远边缘计算模组和解决方案,不仅适用于消费类和工业类机器人领域,还可广泛应用于智能座舱、机器视觉、个性化虚拟助理、平板电脑、老人监护、智能家居、AI玩具及可穿戴设备等多元化场景,为各行业提供强大的AI赋能,例如更自然的语音交互、更精准的图像识别以及更加个性化的服务体验。


此外,在成功实现DeepSeek模型端侧运行的基础上,移远通信还完成了该模型的针对性微调,并应用于自身的大模型解决方案中,为客户提供更精准、更高效的端侧AI服务。这一成果不仅彰显了移远通信在端侧AI领域的技术实力,更体现了其领先的工程化能力,将有力推动AIoT应用的快速发展与落地。


面向亟待接入AI能力的广泛垂直领域,移远通信将持续投入资源,推动更多高、中、入门级边缘计算模组,以及智能座舱、5G、LTE模组和解决方案全面接入DeepSeek等先进模型以及云端大模型,助力物联网设备实现智能化升级,开启万物智联新时代

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    91

    文章

    42239

    浏览量

    303264
  • 移远通信
    +关注

    关注

    6

    文章

    872

    浏览量

    21032
  • 边缘计算
    +关注

    关注

    22

    文章

    3586

    浏览量

    53830
  • DeepSeek
    +关注

    关注

    2

    文章

    862

    浏览量

    3500
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    物理AI加速落地|美格智能行业首家大规模量产交付 77TOPS AI 模组,并推动AI能力侧向云端拓展

    近日,美格智能行业首家正式开启77TOPSAI模组的大规模量产交付,将批量交付的AI模组硬件性能,再次拉上全新量级,持续引领高算力产业发
    的头像 发表于 05-19 15:29 296次阅读
    物理<b class='flag-5'>AI</b><b class='flag-5'>加速</b><b class='flag-5'>落地</b>|美格智能行业首家大规模量产交付 77TOPS <b class='flag-5'>AI</b> <b class='flag-5'>模组</b>,并推动<b class='flag-5'>AI</b><b class='flag-5'>能力</b>从<b class='flag-5'>端</b>侧向云端拓展

    运行 30B 大模型!高性能 RISC-V 边缘计算盒:AIBOX-K3

    与60TOPS通用AI推理算力,可广泛应用于边缘智算服务器、工业边缘计算、智能视觉检测、无人设备、
    的头像 发表于 04-22 16:46 662次阅读
    可<b class='flag-5'>运行</b> 30B 大<b class='flag-5'>模型</b>!高性能 RISC-V <b class='flag-5'>边缘</b><b class='flag-5'>计算</b>盒:AIBOX-K3

    让连接无界,让算力觉醒!通信实力亮相embedded world 2026

    与硬核实力,涵盖AI边缘计算生态、具身智能机器人、5G-A连接等多个核心赛道。AI创新:软
    的头像 发表于 03-10 20:42 1008次阅读
    让连接无界,让算力觉醒!<b class='flag-5'>移</b><b class='flag-5'>远</b><b class='flag-5'>通信</b>实力亮相embedded world 2026

    通信×古月居:AI算力模组加持,OriginMan机器人焕新升级

    门槛。专为机器人场景定制开发的高性能AI算力模组,已成功落地应用于古月居OriginMan全
    的头像 发表于 01-08 19:11 660次阅读
    <b class='flag-5'>移</b><b class='flag-5'>远</b><b class='flag-5'>通信</b>×古月居:<b class='flag-5'>AI</b>算力<b class='flag-5'>模组</b>加持,OriginMan机器人焕新升级

    如何让AIoT设备时刻“智商在线”?AI太懂了!

    。在10月31日举办的2026中国AIoT产业年会上,通信AI前沿技术中心总负责人王韬发表“
    的头像 发表于 10-31 19:07 793次阅读
    如何让AIoT设备时刻“智商在线”?<b class='flag-5'>移</b><b class='flag-5'>远</b><b class='flag-5'>AI</b>太懂了!

    此芯科技发布“合一”AI加速计划,赋能边缘AI创新

    产品组合,覆盖从1.5B至32B参数规模的AI模型推理需求,满足工业、消费电子、智能终端等多样化场景的部署需求,推动AI技术从云端向
    的头像 发表于 09-15 11:53 2011次阅读
    此芯科技发布“合一”<b class='flag-5'>AI</b><b class='flag-5'>加速</b>计划,赋能<b class='flag-5'>边缘</b>与<b class='flag-5'>端</b><b class='flag-5'>侧</b><b class='flag-5'>AI</b>创新

    × 高通:从开源生态到场景验证,共筑AI新生态

    8月26日,“更开源更智能”为主题的2025高通&通信智能物联网技术开放日在深圳成功举办。这场技术盛会由高通公司与
    的头像 发表于 08-26 21:52 1249次阅读
    <b class='flag-5'>移</b><b class='flag-5'>远</b> × 高通:从开源生态到场景验证,共筑<b class='flag-5'>端</b><b class='flag-5'>侧</b><b class='flag-5'>AI</b>新生态

    通信飞鸢AIoT大模型应用算法成功通过备案

    AI领域的深厚技术积累与行业领先地位。 "飞鸢AIoT大模型应用算法"面向企业客户,聚焦对话生成场景,能够基于用户输入音频,生成相应的音频回复。目前,该算法已依托
    的头像 发表于 08-06 08:48 1128次阅读
    <b class='flag-5'>移</b><b class='flag-5'>远</b><b class='flag-5'>通信</b>飞鸢AIoT大<b class='flag-5'>模型</b>应用算法<b class='flag-5'>成功</b>通过备案

    云+多模态”新范式:《通信AI模型技术方案白皮书》正式发布

    7月28日,通信联合智次方研究院正式发布《AI模型技术方案白皮书》(以下简称“白皮书”)。这份白皮书系统梳理了
    的头像 发表于 07-28 13:08 1527次阅读
    “<b class='flag-5'>端</b>云+多模态”新范式:《<b class='flag-5'>移</b><b class='flag-5'>远</b><b class='flag-5'>通信</b><b class='flag-5'>AI</b>大<b class='flag-5'>模型</b>技术方案白皮书》正式发布

    模型迎来“轻”革命!通信 × RWKV 打造“轻量AI大脑”

    7月27日,通信宣布与RWKV公司建立全面合作关系,双方将依托的算力平台,优化并支持RWKV最新
    的头像 发表于 07-27 19:02 1228次阅读
    <b class='flag-5'>端</b><b class='flag-5'>侧</b>大<b class='flag-5'>模型</b>迎来“轻”革命!<b class='flag-5'>移</b><b class='flag-5'>远</b><b class='flag-5'>通信</b> × RWKV 打造“轻量<b class='flag-5'>AI</b>大脑”

    媒体报道 | 锚定“AI+机器人”,又有大动作!

    随着AI算力的指数级突破与大模型轻量化部署技术的快速成熟,“
    的头像 发表于 07-11 19:05 1226次阅读
    媒体报道 | 锚定“<b class='flag-5'>端</b><b class='flag-5'>侧</b><b class='flag-5'>AI</b>+机器人”,<b class='flag-5'>移</b><b class='flag-5'>远</b>又有大动作!

    AI到全链路解决方案:通信如何重塑AloT产业?

    的物联网整体解决方案供应商,通信受邀出席峰会并发表两场演讲,围绕AI、云端
    的头像 发表于 07-05 19:04 2011次阅读
    从<b class='flag-5'>端</b><b class='flag-5'>侧</b><b class='flag-5'>AI</b>到全链路解决方案:<b class='flag-5'>移</b><b class='flag-5'>远</b><b class='flag-5'>通信</b>如何重塑AloT产业?

    广和通加速通义千问Qwen3在全面落地

    6月,广和通宣布:率先完成通义千问Qwen3系列混合推理模型在高通QCS8550平台的适配部署。广和通通过定制化混合精度量化方案与创新硬件加速算法,
    的头像 发表于 06-25 15:35 1483次阅读

    LLaVA、RWKV、Qwen3... 远端AI模型解决方案实现多维度跃迁

    AI破竹之势席卷千行百业,大模型技术正惊人的速度迭代演进,重塑着智能世界的底层逻辑。作为全球AIoT行业的引领者,
    的头像 发表于 06-23 19:07 1130次阅读
    LLaVA、RWKV、Qwen3... <b class='flag-5'>移</b>远端<b class='flag-5'>侧</b><b class='flag-5'>AI</b>大<b class='flag-5'>模型</b>解决方案实现多维度跃迁

    5G+AI双剑合璧!通信“数智双擎”,破局FWA智能连接新赛道

    5G模组为核心,深度融合调用AI模型的强大能力,通过网络资源智能调度、本地
    的头像 发表于 06-16 19:14 1377次阅读
    5G+<b class='flag-5'>AI</b>双剑合璧!<b class='flag-5'>移</b><b class='flag-5'>远</b><b class='flag-5'>通信</b><b class='flag-5'>以</b>“数智双擎”,破局FWA智能连接新赛道