0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AI如何在数以百亿的MCU嵌入式应用中落地?

海思技术有限公司 来源:上海海思 2023-12-12 15:53 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

AI如何在数以百亿的MCU嵌入式应用中落地?海思正在给出自己的答案。海思A²MCU聚焦行业专用(Application Specific)嵌入式AI技术(Artificial Intelligence),将AI领域超轻量级的技术框架、极致性能的推理要求、方便快速的部署能力与MCU深度融合,为MCU行业客户探索智能化应用提供新的选择。在TCL小蓝翼P7新风空调发布会上,海思与TCL空调联合发布“A²MCU,让空调越用越节能”解决方案,正是A²MCU的初露锋芒。

01714434-98c3-11ee-8b88-92fbcf53809c.jpg

为什么嵌入式AI关注度越来越高?

嵌入式AI是将AI算法嵌入到端侧设备中,使得设备能够具备智能化、自动化和高效化的能力。AI的历史可以追溯到20世纪50年代,进入21世纪,受益于算力的迅猛提升,以及大数据、云计算深度学习等技术发展,人工智能在图像识别、语音识别、自然语言处理、机器人、自动驾驶等领域取得了突破性的进展。随着应用的拓展和渗透,端侧AI近几年逐渐成为业界热点。相对于数百万到千万的AI服务器,端侧AI MCU的数量级将高达数以百亿。基于现有的AI范式,由于资源的限制、模型的适应性等因素,AI越向下越难做,但同时AI下沉带来的商业潜力也很大。因此将AI技术嵌入到端侧最底层的MCU芯片,已成为业界领先MCU企业都在探索的新方向。

基于MCU的AI方案在行业落地,会有哪些困难?

由于MCU硬件性能限制、AI软件的复杂度高、行业应用实时性要求高、能耗限制严格、数据安全性要求高,嵌入式AI在MCU的行业应用落地需要业务团队同时具备丰富的AI知识经验,以及嵌入式软硬件能力。

一方面要开发团队与落地场景之间要展开深度合作。基于真实场景的基础数据及嵌入式AI团队提供的专业的定制化方案,才能真正解决问题,做出价值。

另一方面要能够实现AI模型到MCU的快速部署。通用AI模型往往并不是针对嵌入式应用设计,AI开发工具品类又非常庞杂,而MCU的RAM、Flash资源及CPU算力通常都非常受限,如何选择合适的AI模型和开发工具用来开发出解决特定场景问题模型,又如何将AI模型部署到受限资源的MCU上,这是一个复杂的工程。

海思A²MCU嵌入式AI通过哪些关键技术解决了这些问题?

海思嵌入式AI提供了超轻量级的AI技术框架、极致性能完全满足MCU的推理要求、并能够将多模型快速转换为代码并导入工程,开发者进行方便快速的产品部署。

1)极简框架:在MCU上部署的AI模型,转为网络层的运行代码后,直接调用RISC-V核的优化算子库,省去了模型解析器等一般复杂的框架。RISC-V的开源架构支持自定义指令集,能够更好的支持算子库的优化实现,这也是RISC-V相对于其他内核的一个关键优势。

01815d56-98c3-11ee-8b88-92fbcf53809c.jpg

2)极致性能:意味着在确保场景收益的前提下,将训练推理过程做到极简。包括但不限于:训练模型优化:包括模型结构优化,减少内存读写和计算量;模型训练后量化,使模型更小,推理更快。算子的轻量化、内存优化以及深度性能调优:通过算子库轻量化、算子数据预重排与内存复用、使用算法减少乘法运算次数与内存访问的开销、深度算法调优减少运算次数,与访存开销进行平衡。

018894ae-98c3-11ee-8b88-92fbcf53809c.png

模型剪枝、压缩的轻量化

019322f2-98c3-11ee-8b88-92fbcf53809c.png

训练后量化,模型更小,推理更快

3)易开发部署:海思A²MCU嵌入式AI方案可提供多种模型的转换,例如通过TensorFlow Lite、PyTorch、MindSpore等开发的模型,可快速便捷的转成代码,并导入部署到工程代码中。

019a0810-98c3-11ee-8b88-92fbcf53809c.png

海思A²MCU嵌入式AI应用效果如何?

12月10日,在TCL小蓝翼P7新风空调发布会上,海思与TCL空调联合发布了“A²MCU,让空调越用越节能”解决方案,该方案基于空调环境、运行和目标参数,通过嵌入式AI算法对复杂工况进行学习,提高运行周期内的整体能效。通过业务场景和AI强化学习模型的深度融合,给空调产品的节能带来代级的差异化竞争力,最终达成调温阶段能耗降低16%的效果。

01a51962-98c3-11ee-8b88-92fbcf53809c.jpg

结语

万物智能时代,我们既需要云端大算力的训练推理,也离不开嵌入式AI在千行百业的端侧普惠应用。相对而言AI服务器的体量是百万~千万数量级,而小算力的MCU则是数百亿数量级,嵌入式AI在绿色节能、人机交互、故障预测、安全防护等行业显示出巨大的潜力。

在嵌入式AI技术中,AI和MCU的关系是相互促进、共同发展的,而嵌入式AI的难度也恰恰来自AI与MCU两个技术分方向的跨界与结合。海思在AI和MCU领域都有近十年的积累和丰富应用经验,致力于将以往经验和技术积累应用于小算力AI场景,和行业伙伴一起联合创新、创造增量价值。







审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • mcu
    mcu
    +关注

    关注

    147

    文章

    19223

    浏览量

    405085
  • 嵌入式
    +关注

    关注

    5211

    文章

    20737

    浏览量

    338335
  • RISC-V
    +关注

    关注

    49

    文章

    2979

    浏览量

    53664
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    MathWorks携手EDGE AI Foundation:重塑嵌入式AI工程化落地新范式

    和Simulink的开发者,MathWorks将通过与该基金会中英特尔、恩智浦、ADI等产业巨头的深度协作,构建从算法开发到硬件部署的全栈解决方案,破解嵌入式AI工程化落地的三大核心
    的头像 发表于 04-23 10:38 850次阅读

    2026嵌入式及边缘AI技术生态大会精彩回顾

    4月17日,飞凌嵌入式「2026嵌入式及边缘AI技术生态大会」在深圳圆满收官!这场大会以“AI向实生态共融”为核心,汇聚了300余位来自芯片、操作系统、存储、工控等全产业链的专家、生态
    的头像 发表于 04-23 08:03 1683次阅读
    2026<b class='flag-5'>嵌入式</b>及边缘<b class='flag-5'>AI</b>技术生态大会精彩回顾

    AI落地培训 | 人形检测模型嵌入式部署全链路实战

    流程与部署实战”免费培训!本次培训以人形检测模型部署与优化为核心实战项目,聚焦视觉AI检测在嵌入式平台的落地全流程,提供硬件,动手实操,带你在半天时间内走通从模型
    的头像 发表于 04-10 18:41 315次阅读
    <b class='flag-5'>AI</b><b class='flag-5'>落地</b>培训 | 人形检测模型<b class='flag-5'>嵌入式</b>部署全链路实战

    26届嵌入式方向,STM32/RTOS/CAN/设备端联调背景,求车企MCU岗位建议/机会

    各位前辈好,冒昧发帖请教一下。 我是2026 届本科生 ,信息工程专业,方向主要是嵌入式 / 设备端软件 / 机器人控制 。最近在投一些车企和智能硬件相关岗位,重点想争取 MCU 软件 / 汽车电子
    发表于 04-04 05:55

    一场为嵌入式与边缘AI从业者量身定制的技术盛宴,抢先预约席位!

    各位关注嵌入式与边缘计算的朋友们注意啦,「AI向实生态共融」嵌入式及边缘AI技术生态大会将于4月17日在深圳举办,绝对是你今年不容错过的行业盛会!立即免费报名>>这场大会聚焦
    的头像 发表于 04-01 07:59 182次阅读
    一场为<b class='flag-5'>嵌入式</b>与边缘<b class='flag-5'>AI</b>从业者量身定制的技术盛宴,抢先预约席位!

    AI到CRA塑造嵌入式开发未来的关键趋势

    会议之间,亲身感受到了嵌入式开发领域正在发生的深刻变革:从边缘AI的加速落地,到《网络弹性法案》(CRA)带来的合规重塑,再到现代化工作流与平台生态的全面渗透——这些趋势相互交织,正以前所未有的速度重塑
    的头像 发表于 03-30 09:43 663次阅读

    TI扩展MCU版图:TinyEngine™ NPU赋能,边缘AI加速落地嵌入式系统

    电子发烧友网报道(文/吴子鹏)随着人工智能(AI)技术从云端向边缘侧迁移,嵌入式系统正经历一场深刻的变革。边缘AI的优势在于,它能够在数据产生的源头进行实时处理,从而带来更快的响应速度
    的头像 发表于 03-25 09:26 7073次阅读

    嵌入式AI视觉落地的那些事儿——直面AI视觉落地难的挑战

    地理解整个开发链条。 一、QT界面开发:算法与界面必须解耦 嵌入式AI应用通常需要图形界面,QT是常见选择。但开发中容易陷入一个误区:把算法函数直接写在界面类的响应函数里。点一下“开始检测”,界面就卡住,直到检测完成才能动。 QT的信
    的头像 发表于 03-18 14:44 187次阅读

    嵌入式AI开发必看:杜绝幻觉,才是工业级IDE的核心底气

    AI浪潮正在重塑嵌入式开发范式,代码生成效率大幅提升的同时,“AI幻觉”问题却成为工业场景落地的核心阻碍——看似合规的代码暗藏时序错误、硬件逻辑冲突等隐性风险,传统 IDE 缺乏工业级
    发表于 03-18 13:49

    通过高性能MCU与集成外设破解现代嵌入式设计难题

    在智能化浪潮席卷的今天,嵌入式系统的“朋友圈”越来越大——从工业自动化、车联网到物联网设备,应用场景丰富多彩,技术挑战也层出不穷。如何在性能、灵活性和可靠性之间找到最佳平衡点?如何让您的产品既能应对
    的头像 发表于 12-23 15:59 978次阅读

    重磅合作!Quintauris 联手 SiFive,加速 RISC-V 在嵌入式AI 领域落地

    据科技区角报道半导体解决方案提供商 Quintauris 最近宣布和 RISC-V 处理器 IP 领域的头部厂商 SiFive 达成战略合作,目标直接瞄准加速 RISC-V 在嵌入式AI 系统等
    发表于 12-18 12:01

    嵌入式需要掌握哪些核心技能?

    接口是80%岗位的必备技能,工业协议需求集中于特定行业。 在AI、大数据席卷的当下,嵌入式技术依然稳居制造业、物联网、汽车电子等领域的核心地位。 数据显示,2024年嵌入式岗位招聘量同比增长264
    发表于 10-21 16:25

    新一代嵌入式开发平台 AMD嵌入式软件和工具2025.1版现已推出

    AMD 2025.1 版嵌入式软件和工具是面向新一代嵌入式系统开发而打造的综合平台,全面加速概念构想到部署落地。 2025.1 版嵌入式软件和工具的新 增功能 AMD
    的头像 发表于 08-20 09:15 4324次阅读

    AMD 2025.1版嵌入式软件和工具的新增功能

    AMD 2025.1 版嵌入式软件和工具是面向新一代嵌入式系统开发而打造的综合平台,全面加速概念构想到部署落地
    的头像 发表于 08-15 15:32 1517次阅读

    嵌入式AI技术漫谈 如何组建一个AI项目开发小组

    我们来谈一谈如何组建一个AI项目开发小组: 为什么要为嵌入式AI项目 组建一个专门的开发小组 相对于以往成熟的项目开发体系,嵌入式AI项目是
    的头像 发表于 06-11 16:34 1639次阅读