0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

「微侃」城市辅助驾驶NGP中的BEV模型

汽车电子设计 来源:汽车电子设计 2023-04-16 09:20 次阅读

聚焦汽车科技,剖析产业趋势和变革浪潮

今年年初我们在《值得期待的十大智能车技术盘点》中提到,去年,长城旗下的毫末科技、小鹏、以及极狐已经在做“城市辅助驾驶”,这个技术意味着汽车在城市道路上,也能实现被监管的“自动驾驶”。

相比以往的L2+级别的辅助驾驶,主要是在封闭道路使用,比如高架和高速公路上。城市路面上因为路况更复杂,比如有红绿灯需要识别并做出决策、道路线也并不连续、还有行人和非机动车进入机动车的道路等等情况,所以自动驾驶的实现有很大的难度。但一旦做成,的确能让用户省心不少。所以也被我们在年初的时候,把城市辅助驾驶列为今年值得期待的十大智能车技术之一。

小鹏汽车自动驾驶副总裁吴新宙也说“小鹏的XNGP是无人驾驶实现前,智能辅助驾驶的终极形态。”

Part 1

特斯拉在自动驾驶软件和算法上的创新

为什么城市辅助驾驶相比之前的辅助驾驶有了飞速提升,需要先介绍一下特斯拉的BEV鸟瞰图和占有网络模型。

◎BEV(Bird's-eye-view Perception)模型

特斯拉自动辅助驾驶的软件(Tesla Autopilot Software)从 2016 年开始上线1.0版本。到2019年,特斯拉开始用适量空间(Vector Space)的技术对道路线进行识别,并且加入了BEV模型,又叫鸟瞰图预测模型。

b7027272-dbeb-11ed-bfe3-dac502259ad0.png

2019-2020, 特斯拉系统性地导入vector space,并且导入了多视角摄像头的3D目标检测在鸟瞰图下的感知(BEV Perception) 。

b7225ace-dbeb-11ed-bfe3-dac502259ad0.jpg

BEV 是特斯拉自动驾驶系统中的一种模型,是一种基于图像的模型,用于将车辆周围的环境信息转换为平面图。BEV 模型可以通过多个摄像头捕捉到的图像来生成车辆周围的环境信息,然后将这些信息转换为平面图,以便自动驾驶系统进行处理和分析。

特斯拉采用 8 个摄像头采集图像进行有效融合,通过校正后,一并输入到神经网络。顺便科普一下,神经网络就是通过一组算法模拟人脑,是一种称为深度学习过程,还可以从错误中不断改进。

在自动驾驶中,神经网络 对采集到的图像提取特征,进行关联后,投影到一个矢量空间,就可以实现反映周围环境的鸟瞰图BEV的效果。

b734ae68-dbeb-11ed-bfe3-dac502259ad0.jpg

鸟瞰图能很好地还原周围环境,提供自动驾驶所需的2D 图像信息,类似一张平面的地图。虽然会缺失一些空间和高度上信息,无法真实地反映物体在 3D 空间实际占用的体积是多少。但在BEV模型中,特斯拉更关心的是那些静止物体,例如路沿、车道线和栅栏等。

◎占用网络模型(Occupancy Network)

占用网络模型是将三维世界划分为一个网格单元,定义哪个单元被占用,哪个单元是空闲的,还可以把当前场景下被遮挡的静止物体和动态物体也用体积块表示出来。通过占用网络,再结合BEV模型,特斯拉可以对路径规划有了更多信息。

Part 2

小鹏NGP

城市智能导航辅助驾驶

小鹏在迭代自动辅助驾驶方面一直向特斯拉看齐,并且导入了自己的设计理念。在泊车、高精度定位和高精度地图方面有自己的理解,并且率先导入了激光雷达。

小鹏XNGP智能辅助驾驶系统,主要是基于纯视觉感知的速度与预测,更精准地识别动态物体速度和意图,提升驾驶决策的博弈能⼒。计划通过三个阶段进化成终极的无限接近“无人驾驶”的形态。

b767b4b6-dbeb-11ed-bfe3-dac502259ad0.png

今年3月底,小鹏汽车推送了Xmart OS 4.2.0,释放XNGP第一阶段能力:在G9及P7i Max版上,上海、深圳、广州、等高精地图覆盖区域,可以开放点到点的城市智能导航辅助驾驶;在无高精地图覆盖区域,开放具备跨线绕行,识别红绿灯并直行通过路口能力的LCC增强版。

从实际体验上来讲,NGP之前的智能辅助驾驶,主要在有高精地图的、工况简单的路段——主要是高速、高架等封闭路面——来实现的;在无高精地图覆盖的路段,辅助驾驶只能实现车道居中(在传感器能识别车道线的情况下)以及自动跟车等简单功能。

而NGP在高精地图+工况复杂的城市道路上,依靠BEV鸟瞰图模型,也能实现高速上的几乎全程不用接管的辅助驾驶体验。在没有高精地图的道路,NGP第⼀阶段的能力提升,主要是在直⾏遇到红绿灯时,具备了自动起停功能。之前的很多L2+的辅助驾驶,都是无法识别红灯的,只能跟着前车停止或前进;如果遇到红灯且没有前车的情况,打开辅助驾驶的车就是妥妥的“闯红灯”,根本没法用。所以NGP虽然只是第一阶段,但已经让人对未来充满更多期待。

今年是城市辅助驾驶技术出现在我们普通人身边的元年,我们已经看到越来越多的新技术的落地。小鹏、蔚来、华为和后面的理想汽车都会纷纷拿出自己的方案,这将会给消费者带来更多尝试的机会,随着尝试使用的落地,也会带动高阶自动辅助驾驶的完善和发展,这将极大地促进汽车智能化的持续推进。

审核编辑 :李倩

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 神经网络
    +关注

    关注

    42

    文章

    4575

    浏览量

    98775
  • 算法
    +关注

    关注

    23

    文章

    4458

    浏览量

    90761
  • 自动驾驶
    +关注

    关注

    773

    文章

    13060

    浏览量

    163240

原文标题:「微侃」城市辅助驾驶NGP中的BEV模型

文章出处:【微信号:QCDZSJ,微信公众号:汽车电子设计】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    从先进驾驶辅助系统到无人驾驶

      2016亚太智能网联汽车国际峰会暨展览会  时间:2016年12月8-9日(周四至周五)  地点:上海嘉定  主题:从先进驾驶辅助系统到无人驾驶  峰会暨展览介绍:作为新一代自动驾驶
    发表于 10-27 15:53

    高级辅助驾驶ADAS技术

    的尾部。说到ACC的优点,显然,在一定程度上,ACC可以减轻驾驶驾驶的疲劳。ACC系统加上车道偏离辅助系统,可以让你在较好的城市路况中极大的解放双脚甚至双手。ACC作为智能
    发表于 04-03 00:01

    先进驾驶辅助系统的ASIL为什么很重要?

    先进驾驶辅助系统(ADAS)正越来越精密,以至于全自动驾驶的前景似乎不再遥不可及。ADAS的核心是图像传感器,由于它们的作用对被动和主动ADAS的整体效能都越来越重要,因此它们的功能性安全越来越重要
    发表于 08-07 06:43

    Xilinx FPGA在辅助驾驶系统中有哪些应用?

    Xilinx FPGA在辅助驾驶系统中有哪些应用?一种针对汽车应用的Xilinx IQ解决方案
    发表于 05-12 06:40

    图像处理在驾驶警示/辅助ADAS的应用是什么?

    ADAS是什么?图像处理在驾驶警示/辅助ADAS的应用是什么?
    发表于 05-31 07:18

    高级驾驶辅助系统(ADAS)解决方案

    高级驾驶辅助系统(ADAS)解决方案是增长最快的汽车行业之一;根据Strategy Analytics的预测,该领域预计在五年间(2015-2020)增长了10%。即使是入门级模型的设计者也期望
    发表于 11-14 07:11

    华大北斗高精度芯片助力上汽名爵MG7智能驾驶

    随着上汽名爵全新MG7轿跑车的正式发布,其优雅先锋主义风格设计和彪悍的运动轿车性能立刻赢得了年轻用户的广泛青睐。其先进的科技配置更是令人瞩目,特别在智能驾驶方面,MG7具备NGP高阶智能辅助
    发表于 08-30 14:44

    小鹏汽车有超 20% 的用户付费探索 NGP 自动驾驶辅助系统

    1月31日消息 小鹏汽车董事长何小鹏 29 日在极客公园创新大会 2021 上表示,他们有超 20% 的用户付费探索全新的 NGP 自动驾驶辅助系统。 IT之家了解到,小鹏汽车 1 月 26 日推送
    的头像 发表于 01-31 09:25 2286次阅读

    量产见真章:小鹏NGP3000公里远征挑战数据揭晓,用实际体验为最强量产自动驾驶类功能证言

    。小鹏汽车董事长 CEO何小鹏本次挑战活动,从广州至北京,全程3675公里,连续8天,沿海穿越10座城市,采取每天接力的方式,邀请共计228位嘉宾驾驶小鹏P7,基于NGP自动导航辅助
    的头像 发表于 04-02 09:15 752次阅读

    基于BEV(Birds Eye View)的自动驾驶方案

    BEV下的自动驾驶技术发展很可能就是端到端的自动驾驶框架的契机。 SelfD里作者利用BEV视角统一了大量行车视频的数据尺度,并进行了规划和决策模块的
    发表于 12-15 14:49 1366次阅读

    BEV+Transformer对智能驾驶硬件系统有着什么样的影响?

    BEV+Transformer是目前智能驾驶领域最火热的话题,没有之一,这也是无人驾驶低迷期唯一的亮点,BEV+Transformer彻底终结了2D直视图+CNN时代
    的头像 发表于 02-16 17:14 2139次阅读

    焦点丨四维图新120城市高级辅助驾驶地图过审

    · · · · · · · · · · 近日,国家自然资源部地图技术审查中心公布了全国城市高级辅助驾驶地图审图工作的阶段性进展,允许企业批量送审全国城市高级
    的头像 发表于 06-30 11:55 278次阅读

    CVPR上的新顶流:BEV自动驾驶感知新范式

    BEV自动驾驶感知好比一个从高处统观全局的“上帝视角”,将三维环境信息投影到二维平面,以俯视视角展示环境中的物体和地形。在路径规划、障碍物检测、自动驾驶决策等方面,BEV感知都展现出了
    的头像 发表于 08-23 14:51 735次阅读
    CVPR上的新顶流:<b class='flag-5'>BEV</b>自动<b class='flag-5'>驾驶</b>感知新范式

    自动驾驶领域中,什么是BEV?什么是Occupancy?

    BEV是Bird's Eye View 的缩写,意为鸟瞰视图。在自动驾驶领域,BEV 是指从车辆上方俯瞰的场景视图。
    的头像 发表于 01-13 09:41 1942次阅读
    自动<b class='flag-5'>驾驶</b>领域中,什么是<b class='flag-5'>BEV</b>?什么是Occupancy?

    BEV和Occupancy自动驾驶的作用

    BEV是Bird's Eye View 的缩写,意为鸟瞰视图。在自动驾驶领域,BEV 是指从车辆上方俯瞰的场景视图。BEV 图像可以提供车辆周围环境的完整视图,包括车辆前方、
    发表于 01-17 12:33 423次阅读
    <b class='flag-5'>BEV</b>和Occupancy自动<b class='flag-5'>驾驶</b>的作用