0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

自动驾驶迈向3.0时代!车企争抢城市无图NOA,大模型端到端方案加速迭代

Monika观察 来源:电子发烧友 作者:莫婷婷 2024-06-08 00:06 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

电子发烧友网报道(文/莫婷婷)汽车智能化推动了“软件定义汽车”,自动驾驶也同步进入了由软件驱动的2.0时代。发展至今,自动驾驶市场开始迈进3.0时代。那么,什么是自动驾驶3.0时代,在2.0时代向3.0时代的过渡阶段,大模型又有哪些需求?

自动驾驶由2.0时代迈向3.0时代

回顾自动驾驶的发展,可以将其总结为三个发展阶段,由硬件驱动转向软件驱动,如今转向数据驱动,也就是业内所说的自动驾驶3.0时代。在硬件驱动的1.0时代,由激光雷达负责感知,到了软件驱动的2.0时代,感知由传感器单独输出结果,应用了部分小模型,数据量较少。如今在3.0时代,感知由多模态传感器联合输出结果,数据的需求量越来越大,应用了越来越多的大模型。

毫无疑问,大模型正在重塑汽车智能化技术路线,当前进入了自动驾驶2.0时代向3.0时代的技术架构演进的关键阶段。毫末智行认为,在这个过程中,越来越多的分模块出现集中化、模型化,也就是由多个模块变成一个模型,由多个模型变成一个模型,最后会汇聚到这种端到端的大模型,通过端到端的大模型在车上或者在云上完成智能驾驶任务。

当前,有多家厂商发布了应用在汽车领域的大模型及其解决方案,例如毫末智行基于自身对技术发展的预判,发布了Drive GPT大模型,商汤绝影则发布了端到端自动驾驶解决方案UniAD等。

不同的企业对自动驾驶任务的定义是不同的。毫末智行将自动驾驶任务分成了两个阶段,一个是感知阶段,另一个是认知阶段。Drive GPT大模型在感知阶段进行传感器的多模态视觉融合,完成感知后,认知大模型再进行理解,认知模型除了输入自动驾驶所需要的目的地、导航信息,还可以用基础大语言模型,对驾驶环境做理解,从而对驾驶的策略进行预测。商汤绝影智能驾驶产品总监赵祥磊表示,Drive GPT还加入了图片、文字等多模态模型,能够更加高效、立体地理解、感知周围的环境。

要知道,智能汽车在驾驶过程中面临很多复杂的场景,例如能否根据道路的环境控制车速,让行驶更安全。因此大模型需要更精准地完成检测工作,这也就需要通过大量数据的训练。
在云端完成感知大模型和认知大模型的能力提升之后,如何将其赋能至车端,是下一个阶段需要突破的难题。


自动驾驶解决方案走向真端到端,由两段式到一段式

目前,大模型上车已经迎来一定进展,并且随着技术的成熟,NOA功能从高速NOA,卷向城市NOA,再到城市无图NOA。2024年,正是城市无图NOA落地的关键节点。

“图”指的是高精度地图,有图意味着需要高精度地图提供交通标志、红绿灯等道路信息,并且要精确到厘米,让车辆进行更加有效的路线规划和智驾行为。但高精度地图存在制作成本高、需要及时更新地图信息、信息采集法规严格等问题。因此,城市无图NOA已经成为下一阶段的技术需求。更重要的是,城市无图NOA还是大模型是否真的支持端到端的标志之一,这也是为什么在现阶段大模型厂商经常提及“端到端”的原因。

在车企中,智己汽车发布的 D.L.P.(深度学习算法人工智能模型,DDLD+DDOD融合感知大模型也已上车智己L6。智己汽车表示智己L6 Max全系具备无图城市NOA能力。计划在第一季度在上海地区率先推送城市NOA,第二季度开启无图城市NOA公测,第三季度量产无图城市NOA,第四季度实现全国都可开无图城市NOA。

10 年前的 ADAS 功能主要是识别车辆、行人和车道线,让汽车居中行驶。随着技术迭代,增加了响应红绿灯的功能,再接下来,ADAS功能还需要识别更多复杂的道路信息,例如路上的施工区域,让汽车能够绕过障碍物更安全行驶。

商汤绝影智能驾驶产品线总监赵祥磊提及,后面我们发现它要的并不是找一个可通行的空间,而是要去理解这是一个施工的场景,可能需要去左转、右转甚至掉头,这也是我们的理解,我们认为最终的端到端方案,它可能并不是一个感知和决策规划两段式的方案,真端到端应该是一段式的,这样的话它的性能的天花板才会更高。

商汤绝影认为由感知和决策两个模型组成的 “两段式”架构的端到端方案比较容易落地,但存在性能上限瓶颈,因为中间信息的传递主要是人为的,会出现信息传递过滤或丢失的问题。

因此商汤绝影推出UniAD解决方案,公司表示这是真端到端的解决方案,实现了感知决策一体化。具备两大优势,一是性能上限更高,应对非结构化无图道路和多交通参与者交互等复杂能力更强;二是迭代速度更快,针对复杂道路场景,相比于基于规则方案,开发效率提高数倍。目前已经完成实车部署开始路测。

商汤绝影采用了数据驱动、大模型驱动让UniAD更高效地响应复杂道路场景。但是商汤绝影发现,当随着时间周期越来越长,corner case出现概率也在降低,基于车辆采集的数据综合效率逐渐降低。此时需要寻找新的数据驱动引擎。而AIGC的出现恰好能解决一部分问题,大模型能够生成交通事故等长尾场景的数据,再进行训练。

在毫末智行的自动驾驶技术路线中,也规划了将在今年实现通用感知+通用认知,以及端到端训练,打造感知+认知端到端。

当然,端到端的模型开发、基于大模型的数据生成,都是需要算力基础设施作为支撑。算力基础设备的算力规模或许会成为下一阶段大模型厂商的竞争优势。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 自动驾驶
    +关注

    关注

    791

    文章

    14668

    浏览量

    176470
  • 大模型
    +关注

    关注

    2

    文章

    3440

    浏览量

    4963
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    模型中常提的快慢思考会对自动驾驶产生什么影响?

    提出的“快慢系统”理论启发,旨在让自动驾驶系统模拟人类的思考与决策过程。理想汽车结合与VLM模型,推出了业界首个在车
    的头像 发表于 11-22 10:59 2269次阅读
    大<b class='flag-5'>模型</b>中常提的快慢思考会对<b class='flag-5'>自动驾驶</b>产生什么影响?

    智驾模拟软件推荐:为什么aiSim是业界领先的自动驾驶模拟平台?

    /激光雷达)、AI场景生成与物理级渲染,以及合成数据生成(降低90%训练成本)。该平台兼具确定性仿真和量产级稳定性,适用于L2-L4级自动驾驶开发,为、Robotaxi公司等提供从模型
    的头像 发表于 11-20 13:38 242次阅读

    西井科技自动驾驶模型获得国际认可

    近日,西井科技AI创研团队在国际权威自动驾驶算法榜单NAVSIM v2中脱颖而出,凭借创新的自动驾驶
    的头像 发表于 10-15 17:20 1052次阅读

    自动驾驶模型为什么会有不确定性?

    。为了能让自动驾驶汽车做出正确、安全且符合逻辑的行驶动作,模型被提了出来。
    的头像 发表于 09-28 09:20 541次阅读
    <b class='flag-5'>自动驾驶</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>大<b class='flag-5'>模型</b>为什么会有不确定性?

    博世一段式端方案打造智能辅助驾驶体验

    在智能辅助驾驶加速落地的今天,面向复杂多变城市环境的广覆盖、高适应性智能辅助驾驶方案,目前仍是技术发展的关键突破方向。博世致力于打造既高效又
    的头像 发表于 08-07 16:55 2023次阅读

    为什么自动驾驶模型有黑盒特性?

    [首发于智驾最前沿微信公众号]随着自动驾驶技术落地,(End-to-End)大模型也成为行业研究与应用的热门方向。相较于传统
    的头像 发表于 07-04 16:50 586次阅读
    为什么<b class='flag-5'>自动驾驶</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>大<b class='flag-5'>模型</b>有黑盒特性?

    数据标注方案自动驾驶领域的应用优势

    10-20TB,其中需要标注的数据占比超过60%。在这样的背景下,数据标注方案应运而生,正在重塑自动驾驶的数据生产范式。
    的头像 发表于 06-23 17:27 737次阅读

    为什么城市NOA离不开激光雷达?

    [首发于智驾最前沿微信公众号]随着各车在智能驾驶领域的竞争不断加强,越来越多新技术在汽车上得以搭载,城市NOA作为体现智能驾驶应用最为普遍
    的头像 发表于 05-28 09:13 692次阅读
    为什么<b class='flag-5'>城市</b><b class='flag-5'>NOA</b>离不开激光雷达?

    新能源软件单元测试深度解析:自动驾驶系统视角

    焦点是否落在目标物体上。某自动驾驶公司借此发现模型在夜间过度关注路灯而非行人。 ‌ 实时性保障: ‌时间感知测试框架(TAF)注入时间戳探针,监控函数执行耗时。例如,某路径规划算法因内存泄漏导致响应
    发表于 05-12 15:59

    一文带你厘清自动驾驶架构差异

    [首发于智驾最前沿微信公众号]随着自动驾驶技术飞速发展,智能驾驶系统的设计思路也经历了从传统模块化架构
    的头像 发表于 05-08 09:07 783次阅读
    一文带你厘清<b class='flag-5'>自动驾驶</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>架构差异

    自动驾驶中基于规则的决策和模型有何区别?

    自动驾驶架构的选择上,也经历了从感知、决策控制、执行的三段式架构到现在火热的模型,尤其是在2024年特斯拉推出FSD V12后,各
    的头像 发表于 04-13 09:38 3425次阅读
    <b class='flag-5'>自动驾驶</b>中基于规则的决策和<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>大<b class='flag-5'>模型</b>有何区别?

    自动驾驶中常提的“NOA”是个啥?

    近年来,自动驾驶技术发展迅速,业界不断探索如何在复杂交通场景中实现真正的无人驾驶城市NOA作为自动驾驶的一项前沿技术,正成为各大厂商相互争
    的头像 发表于 04-09 09:03 2157次阅读
    <b class='flag-5'>自动驾驶</b>中常提的“<b class='flag-5'>NOA</b>”是个啥?

    NVIDIA Halos自动驾驶汽车安全系统发布

    NVIDIA 整合了从云端的安全自动驾驶开发技术套件,涵盖车辆架构 AI 模型,包括芯片
    的头像 发表于 03-25 14:51 966次阅读

    2024年自动驾驶行业热点技术盘点

    自动驾驶技术日新月异,每一年都会有新的突破。2024年的自动驾驶,更是出现了许多新的技术路线,其中包括城市NOA(Navigate on Autopilot)、Robotaxi、
    的头像 发表于 01-14 10:48 1144次阅读

    自动驾驶技术研究与分析

    编者语:「智驾最前沿」微信公众号后台回复:C-0450,获取本文参考报告:《自动驾驶行业研究报告》pdf下载方式。 自动驾驶进入202
    的头像 发表于 12-19 13:07 1511次阅读