0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

原生支持Transformer,爱芯元智打造未来车芯解决方案

爱芯元智AXERA 来源:爱芯元智AXERA 2024-03-18 09:38 次阅读

3月15日至17日,2024年中国电动汽车百人会论坛在北京钓鱼台国宾馆召开。在17日下午以“构建多元互融、面向用户的智能汽车新生态”为主题的智能生态汽车论坛上,人工智能芯片研发及基础算力平台公司爱芯元智受邀参会,爱芯元智车载事业部总裁龚惠民发表主题演讲,阐述智驾算力、算法的演进及爱芯元速智驾芯片的最新落地成果。

算力算法“一加一减”

Transformer基石效应凸显

不同于Sora/GPT等生成虚拟世界的物理模型,以真实的物理规律为准的智能驾驶正在经历从real world study到real word model的过程。技术的不断发展也带来了算力的增加和算法的升级。龚惠民指出,一方面,摄像头、雷达的指数级增加让智能驾驶的算力迎来了高增长时代。另一方面,不断优化的算法也让模型可以集中力量处理后端模块更关心的元素,减少了算力的浪费。

“通过算力的增加加大计算能力,通过算法的聚焦让算力能够更好地解决自动驾驶的关键问题,力出一孔,最终目的是使得我们能够在自动驾驶这一端侧实时应用系统中,取得足够智能的自动驾驶性能。”龚惠民表示,算力与算法的“一加一减”是一个聚焦的过程,大算力在更聚焦的算法下能够使智能驾驶端侧应用获得足够优异的性能,即通过足够大的“压强”打穿AI智能驾驶的性能体验难关。

而随着大模型与Sparse Transformer的进一步发展,自动驾驶的端到端大模型成为可能。在这一过程中,Transformer将取代CNN主流算子的地位,成为构建自动驾驶统一模型的必要基石。

原生支持Transformer

爱芯元速打造未来车芯解决方案

尽管Transformer正在席卷AI领域,但现阶段能够原生支持Transformer的处理平台并不多。究其原因,龚惠民认为,原有NPU设计灵活度不够及常用PTQ部署精度缺失是影响Transformer技术落地进程的关键,而引用CPU计算子图又加重推理速度损失,因此,行业迫切需要更适合的算力平台。

864d82d2-e466-11ee-a297-92fbcf53809c.png

面对Transformer落地的复杂性,芯片平台需要提升推理效能,且要兼具更灵活性的部署能力。依托自身深度自研AI处理器技术,爱芯元智推出了面向未来智驾的M76/M77系列芯片平台。

据龚惠民介绍,M76/M77两大系列平台通过对Transformer算子的原生高效支持以及数据IO的优化,取得了行业高水平Transformer推理效能,且由于爱芯通元NPU灵活支持混合精度模型部署,平台还可通过爱芯提供的工具链进行快速Transformer模型的PTQ量化部署,并保障精度满足落地要求。

此外,爱芯M76/M77平台还原生支持各类Transformer算子及变体。而灵活的软硬件协同设计也能快速适配新的算子需求,全面支持智驾行业从主干网络、BEV空间映射、到稀疏感知、以至于多模态融合、端到端大模型的不断演进。其中M76是业界首款原生支持Transformer的车规级SoC,也是市面上唯一的单SoC被动散热行泊一体芯片,其SwinT Transformer性能已经超过了orin-x,具有高效能、高性价比等特点,自研爱芯通元混合精度NPU 100%支持BEV,100%支持全车型被动散热,成为多芯片高速NOA方案的完美替代品,而M77则是真正端到端的计算芯片。

坚定不移做Tier 2

助力自动驾驶加速落地

当前汽车产业链瞬息万变,生态环境日益复杂,生态企业如何共荣共生?对此,龚惠民表示,作为一家芯片研发企业,爱芯会坚定不移地做好Tier 2,把更多空间留给算法合作伙伴和Tier 1厂商

龚惠民介绍,爱芯元智于2023年6月正式进军车载芯片市场,并于11月底推出了车载品牌爱芯元速。目前已与众多优秀合作伙伴建立了长期战略合作关系,推出的车载芯片产品已经在多款重要车型上完成定点,包括前视ADAS,电子外后视镜,行泊一体等智能化应用中均能看到爱芯的身影。

其中,M55凭借着优秀的画质及安全性成为应对未来AEB标配的利器。在高工智能最新公布的2023中国市场乘用车标配前视一体机/域控国产计算方案份额中,爱芯元智位列第二位。国际权威咨询机构Canalys发布的最新的2024中国ADAS SoC厂商领导力矩阵也显示,爱芯元智进入领导者象限,成为增速最快的本土新晋智驾SoC供应商。为满足智能驾驶的多场景需求,今年下半年,爱芯元智还将逐步实现更大规模的量产应用。

汽车智能化的大潮滚滚而来,竞争愈发激烈,龚惠民认为,只有“理想慢半步,落地快三步”才能应对不断出现的新挑战,爱芯元速M55,M76,M77芯片上的极致创新,帮助伙伴将技术转化为差异化价值,转化为销量,转化为利润,在产业发展中拥有自己的一席之地,真正做到日月不同光,昼夜各有宜,从而形成良好发展的汽车生态圈。




审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 电动汽车
    +关注

    关注

    155

    文章

    11167

    浏览量

    223075
  • GPT
    GPT
    +关注

    关注

    0

    文章

    302

    浏览量

    14870
  • 自动驾驶
    +关注

    关注

    773

    文章

    13056

    浏览量

    163234
  • NPU
    NPU
    +关注

    关注

    2

    文章

    210

    浏览量

    18086
  • 爱芯元智
    +关注

    关注

    1

    文章

    54

    浏览量

    4448

原文标题:电动汽车百人会丨爱芯元智龚惠民:原生支持Transformer,爱芯元速打造未来车芯解决方案

文章出处:【微信号:爱芯元智AXERA,微信公众号:爱芯元智AXERA】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    派 Pro 开发板试用体验】+ 图像分割和填充的Demo测试

    感谢电子发烧友和智公司提供的测试机会。 自从开箱派 Pro (AXera-Pi Pro)开发板之后一直没有更新,电子发烧友的小姐姐
    发表于 12-26 11:22

    派 Pro 开发板试用体验】派pro通过无线网卡rtl8188eu连接热点

    派pro通过无线网卡rtl8188eu连接热点 派pro目前的底板的pcie的复位有问题,所以pcie接口无法挂载上去,所以自己购买的rtl8822网卡也用不了,然后想起来自
    发表于 12-20 18:02

    派 Pro 开发板试用体验】在派部署ChatGLM3(一)

    ,除正常的多轮对话外。同时原生支持工具调用(Function Call)、代码执行(Code Interpreter)和 Agent 任务等复杂场景。 3,更高效:ChatGLM3 还可手机部署的端侧
    发表于 12-17 22:54

    派 Pro 开发板试用体验】关于升级到1.45版本后出现的问题反馈

    想着升级到1.45的bsp版本好能使用硬件接口还有跟智github开源的sdk等仓库能对得上以方便正常使用的,结果现在升级了之后翻车了。 升级到1.45的之后出现的问题是网口无法
    发表于 12-13 20:36

    派 Pro 开发板试用体验】部署派官方YOLOV5模型

    、总结 得益于官方案例,开发者可以很方便的在智SoC硬件平台上部署常见的深度学习算法模型,方便开发者快速评估和适配业务。
    发表于 12-12 22:58

    派 Pro 开发板试用体验】开箱及配置

    首先还是要感谢发烧友论坛、智以及SIPEED开展的本次活动,在看到板子强大的编解码能力后,马上决定参与本次活动,本来以为没有成功,没想到过了几天之后,论坛的小姐姐就联系我了,实在是太开心了
    发表于 12-02 17:50

    派 Pro 开发板试用体验】开箱测试

    边缘智能计算的需求。通过内置多种深度学习算法,实现视觉结构化、行为分析、状态检测等应用,高效率支持 Transformer 模型和视觉大模型。 打开快递包装之后,发现派Pro的盒子
    发表于 11-20 22:09

    派 Pro 开发板试用体验】篇一:开箱篇

    了丰富的外设可供用户方便地进行调试。它可帮助用户在智慧城市、智慧教育、智能创造等领域发挥更大的价值。 上图: 关于AX650N:智推出的又一款高性能智能视觉芯片。一款高画质,高能效比
    发表于 11-15 11:32

    派 Pro 开发板试用体验】开箱报告 + 资料准备

    很高兴获得了这次试用爱心派Pro开发板的试用资格,之前也有接触过智家的AX620开发板,是因为他们的家的AI ISP慕名而来的,之前深圳安博会的时候也有去现场体验过他们的产品,确实做的不错
    发表于 11-14 20:59

    派 Pro 开发板试用体验】开箱报告

    开发板介绍 收到了派 Pro (AXera-Pi Pro)开发板,一个高能效比智能视觉芯片 AX650N,处理器是8核64位Cortex-A55架构,主频达1.7Ghz。内置高算力视频,图片处理
    发表于 11-13 13:18

    派 Pro 开发板试用体验】+开箱初次体验

    ) M4N-Dock开发板(已安装好风扇、适配器接口) 产品基本介绍    M4N-Dock 是 Sipeed 公司推出的端侧混合精度高算力边缘计算盒子,搭载智第三代高能效比智能视觉芯片
    发表于 11-12 10:58

    派 Pro 开发板试用体验】开箱报告

    首先感谢智 & 电子发烧友给与的试用机会! 首先介绍下智公司(AXERA):
    发表于 11-12 00:31

    派 Pro 开发板试用体验】+收货开箱初测

    本帖最后由 邓云秀 于 2023-11-29 13:44 编辑 感谢电子发烧友论坛。 感谢智半导体(宁波)有限公司。 效率高。昨天发货今天就收到了。 铁盒包装
    发表于 11-11 10:00

    大圆柱电在PACK应用中的轻量化解决方案

    性能等相关问题:如结构胶(导热、绝缘)、灌封胶(灌封、导热)、密封胶(密封) 以下是我司为各大圆柱电厂家提供的轻量化解决方案: 一、大圆柱电发泡灌封技术: 电池包无模组方案采用大量
    发表于 10-17 10:49

    IP6862一多充方案性价比高外围少

    IP6862是一款英集全新推出的一双充无线充电方案,采用QFN32封装5*5MM可支持15W+15W/15W+5W版本,支持全新1
    发表于 06-16 20:09