0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

佐思汽研发布《2022年中国自动驾驶数据闭环研究报告》

佐思汽车研究 来源:佐思汽车研究 作者:佐思汽车研究 2022-08-09 11:03 次阅读

佐思汽研发布《2022年中国自动驾驶数据闭环研究报告》。

一、自动驾驶发展逐步从技术驱动转向数据驱动

如今,自动驾驶传感器方案及计算平台已日趋同质化,供应商技术差距日益收窄。近两年自动驾驶技术迭代飞速推进,量产落地加速。根据佐思数据中心,2021年,国内L2级辅助驾驶乘用车上险量累计达479.0万辆,同比增长 58.0%。2022年1-6月,中国L2级辅助驾驶在乘用车新车市场渗透率攀升至32.4%。

对于自动驾驶而言,数据贯穿研发、测试、量产、运营维护等全生命周期。伴随智能网联汽车传感器数量的快速增加,ADAS和自动驾驶车辆数据的生成量也呈现指数级增长,从GB到TB、PB、EB直至将来的ZB。以数据驱动的汽车进化,满足用户个性化的需求,车企才能走实走远。

根据《汽车采集数据处理安全指南》,汽车采集数据是指汽车传感设备、控制单元采集的数据,以及对其进行加工后产生的数据,可细分为车外数据、座舱数据、运行数据和位置轨迹数据等。

318c9f6c-178f-11ed-ba43-dac502259ad0.png

根据网信办2021年8月颁布的《汽车数据安全管理若干规定(试行)》对汽车数据收集、分析、存储、传输、查询、应用、删除等全流程做了详细的规定。在开展汽车数据处理过程中坚持“车内处理”、“默认不收集”、“精度范围适用”、“脱敏处理”等数据处理原则,减少对汽车数据的无序收集和违规滥用。在自动驾驶技术开发过程中,数据收集及处理等首先要合法合规。

数据采集/清洗

从汽车摄像头、毫米波雷达、激光雷达及超声波雷达收集来的大量非结构化数据(图像、视频、语音)可能是原始的和混乱的。为使数据有意义,需对其进行清理、结构化与整理。首先将来自多个来源的数据导入适当的存储库,标准化数据格式,并根据相关规则进行聚合。而后检查损坏、重复或丢失的数据点,并丢弃可能影响数据集整体质量的不需要的数据。最后,用标签对在不同条件下捕获的视频进行分类,例如白天、夜晚、晴天、下雨等。此步骤提供了对将用于训练、验证的清洗后的结构化数据。

数据标注

对数据采集后经过清洗的结构化数据需要进行标注。标注是将编码值分配给原始数据的过程。编码值包括但不限于分配类标签、绘制边界框和标记对象边界。需要高质量的标注来教授监督学习模型对象是什么以及测量训练模型的性能。

在自动驾驶领域,数据标注处理的场景通常包括换道超车、通过路口、无红绿灯控制的无保护左转、右转,以及一些复杂的长尾场景诸如闯红灯车辆、横穿马路的行人、路边违章停靠的车辆等。

常用的标注工具包括图片通用拉框、车道线标注、驾驶员面部标注、3D点云标注、2D/3D融合标注、全景语义分割等。由于大数据的发展和大型数据集数量的增加,数据标注工具的使用不断迅速扩大。

数据传输

如今,数据采集的频率已进入毫秒级别,需要的是数千个信号维度(如总线信号、传感器内部状态、软件埋点、用户行为及环境感知数据等)的高精度数据,同时避免数据丢失、乱序、跳变及延时,并在高精度高质量前提下,极大压缩传输/存储成本。车联网数据的上下行链路比较长(从车端MCUDCU、网关、4G/5G到云端)需要保证各链路节点的数据传输质量。

针对数据传输的新变化,部分企业已能提供高效的数据采集及车云一体传输方案,例如智协慧同EXCEEDDATA灵活数采平台方案,在车端边缘计算环境基于实时数据,实现了10毫秒级实时运算,用于触发灵活数据采集上传功能,上传的数据已经经过计算和筛选,显著降低上传的数据量。此外对车端原始信号进行100-300倍无损压缩和存储,云端管理平台保存无损高压缩比的车端高质量信号, 支持数采算法的下发、多种采集模式的触发、采集数据实时上传到业务桌面的一键式下载,按车辆、按事件、按时间段等多重灵活筛选,随用随解,存算分离,实现了车云同构的数据采集-计算-上传-加工的闭环;2021年,国内首个搭载智协慧同EXCEEDDATA解决方案的量产车型已落地(高合HiPhiX)。

31b23aba-178f-11ed-ba43-dac502259ad0.png

来源:智协慧同

数据存储

为更清晰感知周围环境,自动驾驶汽车增配更多传感器,并生成大量数据。一些高等级自动驾驶系统甚至配置40多个各类传感器,对车辆周边360°环境准确感知。自动驾驶系统的研发需经过数据采集、数据汇聚、清洗标记、模型训练、模拟仿真、大数据分析等多个环节,期间涉及对海量数据的汇聚存储,不同环节不同系统之间的数据流转,以及模型训练时对海量数据的读写。数据面临存储瓶颈的新挑战。

为此,众多云服务提供商在这方面的技术和能力成为了帮助车企制胜的关键。比如亚马逊科技AWS以自动驾驶数据湖为中心,助力车企构建起端到端的自动驾驶数据闭环。借助Amazon Simple Storage Service (Amazon S3,云上对象存储服务)构建自动驾驶数据湖,实现数据采集、数据管理和分析、数据标注、模型和算法开发、仿真验证、地图开发以及DevOps和MLOps,车企能更加容易地实现自动驾驶全流程的开发、测试和应用。

31c29b80-178f-11ed-ba43-dac502259ad0.png

来源:AWS 在国内的科技巨头中,以百度数据闭环解决方案为例,其数据存储提供路侧及车辆多源数据信息的数据检索服务,用于业务平台的海量数据查找,具备多维度检索(车辆信息、里程数、自动驾驶时长等)、数据生产到销毁的整个生命周期的管理、支持全景数据视图、数据溯源和数据开放共享等优势。

百度自动驾驶数据闭环解决方案架构

31ce9598-178f-11ed-ba43-dac502259ad0.png

来源:百度

二、自动驾驶高效开发需构建数据闭环系统

自动驾驶发展从技术驱动转向了数据驱动,但是数据驱动的商业模式面临诸多困难。

海量数据处理难:高等级自动驾驶测试车每天采集的数据量是TB级别的,开发团队需要PB级的存储空间,但这些数据中,可用于训练的价值数据约只占不到5%。且对车载摄像头、激光雷达、高精定位等传感器采集的数据还有严格的安全合规要求,无疑对海量数据的接入、存储、脱敏、处理等带来了极大的挑战。

数据标注成本高:数据标注占据了大量的人力和时间成本。随自动驾驶高阶能力的发展,场景复杂度持续提升,会出现更多的难例场景。而提升车辆感知模型的精度,则对训练数据集的规模和质量提出了更高要求。传统人工标注在效率和成本方面,已难以满足模型训练对海量数据集的需求。

仿真测试效率低:虚拟仿真是加速自动驾驶算法训练的有效手段,但仿真场景构建难、还原度低,尤其是一些复杂、危险场景,很难构建。加之并行仿真能力不足,仿真测试的效率低,算法的迭代周期过长。

高精地图覆盖少:高精地图主要还是靠自采集、自制图,仅满足试验阶段指定道路的场景。后续要走向商用,扩展到全国各大城市的城区街道,在覆盖、动态更新,以及成本和效率方面都面临着非常突出的挑战。

为了解决各种困难和问题,自动驾驶高效开发需构建高效的数据闭环系统。

31ddba32-178f-11ed-ba43-dac502259ad0.png

来源:福瑞泰克

就自动驾驶数据闭环而言,在自动驾驶落地过程中需要不断解决Corner Cases,为此必须拥有足够多的数据样本以及便捷的车端验证方式。影子模式就是解决Corner Cases的最佳解决方案之一。

影子模式由特斯拉2019年4月提出并应用到车端,进行相关决策的对比和触发数据上传。利用售出车辆上的自动驾驶软件持续记录传感器探测的数据,在适当时间选择性回传用于机器学习、改进原来的自动驾驶算法。

31ec2798-178f-11ed-ba43-dac502259ad0.png

Dojo超级计算机能利用海量视频数据,做无人监管标注和训练。

2021年特斯拉全球交付93.62万辆汽车,其中中国工厂交付了48.41万辆。2022年上半年交付56万辆。特斯拉利用量产优势,通过影子模式不断优化算法。利用影子模式,通过百万已售车辆做测试车辆,对周围感知以及特殊路况进行捕捉,不断强化对于不确定性事件的预测和规避、学习能力。因为有百万量级的已售车辆支撑,覆盖的Corner Cases及极端工况就会更全面,灵活触发式采集的高质量数据能迭代出更优质的算法,而算法迭代的卓越度又决定着软件的价值。从软件升级订阅服务来讲,数据闭环的爆发力才刚刚崭露头角。

三、数据闭环成为自动驾驶迭代升级的核心

自动驾驶系统不断迭代的前提是算法的持续优化,而算法的卓越度又取决于数据闭环系统的效能,数据在自动驾驶开发每个场景的高效能流转至关重要,数据智能化将成为加速自动驾驶量产的关键。

2021年12月,毫末智行正式发布了国内首个自动驾驶数据智能体系MANA雪湖,从感知、认知、标注、仿真、计算五大能力方面加速自动驾驶技术的演进。未来三年毫末辅助驾驶系统可搭载超100万台乘用车。毫末智行依靠其全自研的自动驾驶系统,在数据的积累、处理、应用上取得了显著优势。海量数据带来技术迭代优势。降本增效优势明显。

再比如,Momenta实现了领先的全流程数据驱动的技术能力,包括感知、融合、预测和规控等算法模块都可以通过数据驱动的方式高效的迭代与更新。其闭环自动化(Closed Loop Automation)是一整套让数据流推动数据驱动的算法自动迭代的工具链。CLA能自动筛选出海量黄金数据,驱动算法的自动迭代,让自动驾驶飞轮越转越快。

31fa046c-178f-11ed-ba43-dac502259ad0.png

来源:Momenta

软件定义汽车背景下,数据、算法和算力是自动驾驶开发的三驾马车。车企研发周期缩短、功能迭代加速,未来能够持续地低成本、高效率、高效能收集数据,并通过真实数据迭代算法,最终形成数据闭环及商业闭环是自动驾驶企业可持续发展的关键所在。

审核编辑 :李倩

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2515

    文章

    47698

    浏览量

    738699
  • 自动驾驶
    +关注

    关注

    773

    文章

    12900

    浏览量

    162934
  • 智能网联汽车

    关注

    9

    文章

    872

    浏览量

    30848

原文标题:数据闭环研究:自动驾驶发展从技术驱动转向数据驱动

文章出处:【微信号:zuosiqiche,微信公众号:佐思汽车研究】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    华为联合Tolly发布L4数据中心自动驾驶网络方案测试报告

    MWC24 巴塞罗那期间,华为联合Tolly Group在“IP Club技术菁英汇”峰会上,面向全球发布L4数据中心自动驾驶网络方案测试报告
    的头像 发表于 02-29 09:37 184次阅读

    自动驾驶产业链爆发前夜?多家车企宣布已获得L3级自动驾驶路测牌照

    工信部网站信息显示,2022年11月,工信部发布《关于开展智能网联汽车准入和上路通行试点工作的通知(征求意见稿)》,针对搭载中国国家标准(GB/T 40429-2021)定义的L3级(有条件
    的头像 发表于 12-27 17:09 485次阅读
    <b class='flag-5'>自动驾驶</b>产业链爆发前夜?多家车企宣布已获得L3级<b class='flag-5'>自动驾驶</b>路测牌照

    语音数据集在自动驾驶中的应用与挑战

    随着人工智能技术的快速发展,自动驾驶汽车已经成为交通领域的研究热点。语音数据集在自动驾驶中发挥着重要的作用,为驾驶员和乘客提供了更加便捷和安
    的头像 发表于 12-25 09:48 192次阅读

    LabVIEW开发自动驾驶的双目测距系统

    达到950以上,而在其他较弱纹理区域也能维持在900左右。误差率低至5%以下,甚至在特征点明显的标志物上可达到2%左右。 基于LabVIEW的双目测距系统在自动驾驶具有广泛的应用前景,它可以为车辆提供
    发表于 12-19 18:02

    年度聚焦|路凯智行:矿山自动驾驶投资价值标杆企业

    11月29日,长期关注自动驾驶领域的著名研究机构亿欧智库发布了 《2023智慧矿山自动驾驶投资价值及标杆企业案例研究报告》 (下称“
    的头像 发表于 12-05 13:10 172次阅读

    2023年中国家用智能照明行业研究报告

    艾瑞咨询:2023年中国家用智能照明行业研究报告
    发表于 11-07 16:37 0次下载

    自动驾驶标准与认证研究:标准化体系助力高阶自动驾驶落地和汽车出海

    自动驾驶标准的建设具有前瞻性和约束性,对国家自动驾驶汽车发展具有深远的意义,目前自动驾驶标准主要围绕L3级及以上自动驾驶展开。在自动驾驶相关
    的头像 发表于 09-27 16:15 673次阅读
    <b class='flag-5'>自动驾驶</b>标准与认证<b class='flag-5'>研究</b>:标准化体系助力高阶<b class='flag-5'>自动驾驶</b>落地和汽车出海

    《2023中国卫星导航与位置服务产业发展白皮书》发布, 北斗芯片再受关注

    5月18日,中国卫星导航定位协会在京发布《2023中国卫星导航与位置服务产业发展白皮书》。白皮书显示,2022我国卫星导航与位置服务产业总
    发表于 09-11 09:35

    连续3年!中国信通院发布自动驾驶政策蓝皮报告

    中国信息通信研究院(以下简称“中国信通院”)、人工智能与经济社会研究中心长期致力于全球自动驾驶政策法规与产业发展的前沿
    的头像 发表于 07-01 12:00 397次阅读
    连续3年!<b class='flag-5'>中国</b>信通院<b class='flag-5'>发布</b><b class='flag-5'>自动驾驶</b>政策蓝皮<b class='flag-5'>报告</b>

    禾多科技再度入选“2022年中国潜在独角兽企业”

        2023年6月,在2023中国(苏州)独角兽企业大会上,长城战略咨询发布了《中国潜在独角兽企业研究报告2023》。禾多科技继被福布斯中国
    的头像 发表于 06-28 11:35 705次阅读

    自动驾驶:汽车电子(autosar整体架构)/自动驾驶

    智能汽车软件行业深度研究:汽车软件的星辰大海|迭代|自动驾驶|模块_新浪新闻 整车控制器(VCU)策略及开发流程_bobuddy的博客-CSDN博客_做vcu控制策略枯燥么 2022年汽车自动
    发表于 06-06 14:33 9次下载
    <b class='flag-5'>自动驾驶</b>:汽车电子(autosar整体架构)/<b class='flag-5'>自动驾驶</b>

    案例研究:什么是自动驾驶

    自动驾驶,是一个根植于人类内心深处的梦想。随着科技的发展,近年来,自动驾驶已逐步成为现实。纵使如此,它仍然面临不小的挑战。本文结合案例对自动驾驶展开了梳理分析,一起来看看~ 摘要: 手动驾驶
    发表于 06-06 11:46 1次下载
    案例<b class='flag-5'>研究</b>:什么是<b class='flag-5'>自动驾驶</b>

    车路协同自动驾驶数据集DAIR-V2X

    是车路协同自动驾驶的关键,为促进学术界和产业界共同打造数据驱动的车路协同自动驾驶,清华大学智能产业研究院(AIR)依托北京市高级别自动驾驶
    发表于 06-01 14:20 0次下载
    车路协同<b class='flag-5'>自动驾驶</b><b class='flag-5'>数据</b>集DAIR-V2X

    中国信通院公布 5G 标准必要专利全球最新排名:华为第一、小米首次进入前十

    院知识产权与创新发展中心在2022发布《全球5G专利活动报告2022)》的基础上,编写了《
    发表于 05-10 10:39

    【新闻】全国普通高校大学生计算机类竞赛研究报告正式发布

    类专业人才培养质量的重要维度之一。20234月8日召开的第58·59届中国高等教育博览会上,全国高校计算机教育研究会、教师教学发展研究国家级虚拟教研室和
    发表于 04-10 10:16