张飞软硬开源基于STM32 BLDC直流无刷电机驱动器开发视频套件,👉戳此立抢👈

利用对抗性深度强化学习来衡量自动驾驶汽车的运动规划和碰撞避免机制的可靠性

智车科技 2018-06-08 09:54 次阅读

现如今,随着人工智能技术的迅速发展,人们普遍认为,未来的交通系统将由自动驾驶汽车(AV)所主导。可以说,对于更为安全的交通设施的需求是引起人们对自动驾驶汽车感兴趣并推动其发展的一个主要推动力。但不可否认,就现在而言,可靠和具有鲁棒性的自动驾驶汽车技术的发展仍然是一个持续的挑战,对可靠的运动规划和碰撞避免机制的研究尤其重要。最近,堪萨斯州立大学(Kansas State University,KSU)的科学家了提出了一种基于深度强化学习的新框架,用于对自动驾驶汽车的碰撞避免机制的行为进行基准测试

现如今,随着人们对自主导航的兴趣日益增长,关于运动规划和碰撞避免技术(collision avoidance techniques)的研究已经加速了全新提议和新进展的速度。然而,新技术的复杂性及其安全性要求使得当前的大部分基准测试框架不充分,因此对高效的比较技术的需求没有得到满足。这项研究提出了一种基于深度强化学习的新框架,用于在处理最佳对抗性智能体的最坏情况下对碰撞避免机制的行为进行基准测试,该最佳对抗性智能体进行训练从而将系统驱动到不安全状态。我们将这个框架的体系结构和流程描述为一个基准测试解决方案,并通过一个比较两种碰撞避免机制的可靠性的实际案例研究来证明其有效性,从而对有意识的碰撞尝试做出回应。

人们普遍认为,未来的交通系统将由自动驾驶汽车(AV)所主导。随着近年来这一领域的迅速发展,许多人预测这种转变将在未来十年内发生。对更为安全的交通运输的需求,是引起人们兴趣和推动自动驾驶汽车发展的一个主要动机。一般认为,用专家计算模型代替人类驾驶员的内在缺陷,可以显著减少由驾驶员的误差所导致的事故数量。然而,可靠和具有鲁棒性的自动驾驶汽车技术的发展仍然是一个持续的挑战,并且人们正在积极从各个研究和发展方向来追求这一目标。

图1:对抗性目标的图释

对可靠的运动规划和碰撞避免机制的研究尤其重要。在过去数十年的时间里,科学家们已经提出了许多解决这个问题的方法,从控制理论形式化和最优控制方法到潜在的基于场和规则的技术(field- and rule-based techniques),等等。最近,机器学习的进步使得基于诸如模仿学习和深度强化学习(RL)等技术的全新数据驱动的碰撞避免方法成为可能。然而,随着其部署环境和机制日益复杂,为这些解决方案提供安全保障的挑战变得越来越困难。一个值得注意的例子是交通碰撞避免系统(TCAS),在它广泛部署到NextGen商用飞机之前,它就已经满足了联邦航空局(FAA)的严格安全要求。然而,最近的一些表现表明它在现代高密度空域中非常不可靠,在一定程度上,它可能会导致不可避免的碰撞状态(ICS)——不管未来的轨迹如何,最终都会发生碰撞。此外,最近的研究表明,自动感知和避免机制可以被对抗性地加以利用以操纵自动驾驶车辆的运动轨迹。

作为回应,科学家们提出了越来越多的缓解技术和全新的安全运动规划方法,但每一种都有特定的特定于案例的假设和验证程序。因此,对这些方法进行定量比较变得非常困难。当前最为先进的方法包括在运动规划和碰撞避免中对安全行为进行基准测试的几次尝试,但是许多现有的框架未能满足基于机器学习的新自适应技术的要求。而且,目前的基准测试框架并不能提供全面的和具有鲁棒性的探测机制,用于在不理想状态和轨迹的复杂空间中进行探索。这种框架中的突出方法是基于随机化或基于情景的障碍产生,这些障碍很容易丢失特定于被测机制的关键ICS或其他不需要的状态。这些框架中的另一种方法依赖于计算上昂贵的碰撞状态可达性分析技术,而这也无法为安全运行的关键边界提供具体的保证。

图2:实验环境设置

为了弥补以安全为中心的基准测试的缺陷,本文提出了一种基于机器学习的新框架,用于在与最优对抗性智能体进行交互的最坏情况下对新技术的可靠性进行基准测试。该框架采用深度强化学习的强大的探索和优化性能来训练对抗性自主智能体,而该智能体的目标是学习旨在将系统驱动到ICS和其他不安全状态的最佳导航策略。根据分析的参数和目标,这些目标可能包括对抗性智能体与自动驾驶汽车的直接碰撞,或利用避免碰撞机制来操纵自动驾驶汽车的轨迹以改变和控制其路径,或间接诱发自动驾驶汽车和环境中的其他物体之间的碰撞。

在此基础上,这项研究的主要贡献包括:

1)提出碰撞避免算法的最坏情况基准测试的计算框架和处理流程,且独立于其复杂性、随机性以及自适应动力学。

2)提出深度强化学习过程流程以无缝地适应于被测系统,并克服完全随机或基于情景的探索机制的缺点。

3)提出关于碰撞避免算法标准化比较的全新的衡量指标。

4)通过一个比较两种碰撞避免机制应对故意碰撞企图的可靠性的实际案例研究,来证明所提出框架的实际应用和效果。

图3:实验结果——平均超过100次运行

总而言之,在本文中,我们提出了一个流程和框架,它利用对抗性深度强化学习来衡量自动驾驶汽车的运动规划和碰撞避免机制的可靠性。我们已经确立了这一框架的优势,要超过当前的基准测试规划,其中包括灵活性和通用性、通过针对特定系统下测试、样本效率和自定义探索机制对对抗性策略进行训练获得的适用性探测,以及为不同系统之间的基准测试和比较提供基线(例如,最坏的情况)测量

可以这样说,本文所提出框架的直接架构为进一步研究提供了一些潜在的研究领域。紧随而来的下一个步骤就是将此框架应用于显著的和最近发布的运动规划和碰撞避免技术中,目的是为相关研究项目创建参考基准。另一个有发展前景的研究领域是检查近期发布技术的适用性,这些已发布的技术声称在对抗性干扰下进行训练可以增强策略的适应力和鲁棒性。因此,通过对对抗性策略和碰撞避免的强化学习模型的结合性训练进行调查,可能会出现潜在的缓解和防御技术。

原文标题:对抗强化学习最新研究:可用于自动驾驶汽车「碰撞避免机制」检测

文章出处:【微信号:IV_Technology,微信公众号:智车科技】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
分享:

评论

相关推荐

四轴机器人编程与应用

主题简介:本次直播主要讲解四轴机器人控制器基本原理及组成。四轴机器人的核心技术内嵌人工智能算法的工业级运动控制技术和伺服
发表于 10-30 00:00 11587次 阅读
四轴机器人编程与应用

5G时代,为机器装上大脑,地平线如何做?

5G牌照发放,边缘计算兴起,地平线如何看待边缘计算中AI芯片的发展趋势?边缘计算会破解AI物联网哪些....
的头像 章鹰 发表于 07-16 19:23 390次 阅读
5G时代,为机器装上大脑,地平线如何做?

无人驾驶等于自动驾驶吗

虽然研发自动驾驶汽车非常昂贵,但是一旦成为主流,可以节省大量费用。
发表于 07-16 17:02 26次 阅读
无人驾驶等于自动驾驶吗

自动驾驶汽车也能「无线充电」!

近日苹果公司则已经申请了电动汽车的无线充电专利。
的头像 iPhone频道 发表于 07-16 16:25 149次 阅读
自动驾驶汽车也能「无线充电」!

如何统筹治理大数据与人工智能

大数据、人工智能脱胎于网络,而又与网络的侧重点不同。
发表于 07-16 16:12 35次 阅读
如何统筹治理大数据与人工智能

多层构想实现智能化 伴拥抱5G,助力产业应用技术升级

此次发布的白皮书就未来城市空间物流提出了多层构想:在基础设施层面实现智能化,包括无人车、无人机、无人....
的头像 北京市电子科技情报研究所 发表于 07-16 16:08 104次 阅读
多层构想实现智能化 伴拥抱5G,助力产业应用技术升级

新科技革命趋势形态、协调发展及综合突进战略思考结论

本文围绕新科技革命趋势,重点讨论了科技产业的转型发展形态。提出了以协调发展完善科技经济发展多元化和社....
的头像 北京市电子科技情报研究所 发表于 07-16 15:52 67次 阅读
新科技革命趋势形态、协调发展及综合突进战略思考结论

人工智能编程教育如何应对落地难题

人工智能已成为全球关注的热点,人工智能也将改变人类的生活方式,人工智能是连接未来的教育。
发表于 07-16 15:50 24次 阅读
人工智能编程教育如何应对落地难题

新——消防机器人诞生了!

2019年7月10-13日,中国国际机器人展览会(CIROS)在国家会展中心(上海)举行。本次展会由....
的头像 北京市电子科技情报研究所 发表于 07-16 15:46 115次 阅读
新——消防机器人诞生了!

走向人机共融的未来

在人类和机器人合作的过程中,二者都超越了自身的局限性,从而实现更高效工作。
发表于 07-16 15:45 22次 阅读
走向人机共融的未来

深度学习的下一站在哪里

深度学习是一个好的开始,但是不能解决一切问题,需要和更高维度的方式叠加。
发表于 07-16 15:32 58次 阅读
深度学习的下一站在哪里

V2X将如何影响自动驾驶车辆的未来?

预计2019年至2022年期间,全球V2X通信技术支出将增长170%以上,V2X市场价值12亿美元。
发表于 07-16 15:25 75次 阅读
V2X将如何影响自动驾驶车辆的未来?

施耐德电气位于上海的旗舰物流中心完成智慧物流中心的数字化改造

中国上海,2019年7月11日——施耐德电气位于上海的旗舰物流中心,施耐德电气(中国)有限公司上海分....
的头像 智汇工业 发表于 07-16 15:22 84次 阅读
施耐德电气位于上海的旗舰物流中心完成智慧物流中心的数字化改造

人工智能发展近70年来背后的故事

从19世纪中叶人工智能的萌芽时期,到现今人工智能的重生,从马文·明斯基到AlphaGo,历史上发生了....
的头像 人工智能见闻 发表于 07-16 15:15 82次 阅读
人工智能发展近70年来背后的故事

现全球灯塔工厂”再添10位新成员 灯塔工厂达26家

近日的夏季达沃斯上,世界经济论坛宣布其“全球灯塔工厂”再添10位新成员。至此,灯塔工厂总数达到26家
的头像 智汇工业 发表于 07-16 15:07 72次 阅读
现全球灯塔工厂”再添10位新成员 灯塔工厂达26家

人工智能非孤立专业 不宜另起炉灶

应创新人工智能与智能科学与技术专业的协同发展模式,构建与新一代人工智能发展相适应的知识结构和课程体系....
发表于 07-16 15:04 27次 阅读
人工智能非孤立专业 不宜另起炉灶

AI音乐家将在这四个方面掀起革新浪潮

就像在其他行业一样,在音乐领域,AI也在帮助服务自动化,在庞大的数据集中发现模式和洞见,并帮助提高创....
发表于 07-16 14:12 20次 阅读
AI音乐家将在这四个方面掀起革新浪潮

智能机器人的研究越来越多 麦德魔方企业把音乐律动与动画完美结合

随着人工智能技术、计算机技术等相关技术的发展,对智能机器人的研究越来越多。在本届峰会上,杭州麦德魔方....
的头像 机器人峰会 发表于 07-16 14:07 64次 阅读
智能机器人的研究越来越多 麦德魔方企业把音乐律动与动画完美结合

全球人工智能与机器人峰会正式开幕:人工智能的现状与未来及瓶颈

7月12日-14日,2019年雷锋网全球人工智能与机器人峰会(CCF-GAIR)正式开幕,该如何锚定....
的头像 机器人频道 发表于 07-16 14:02 68次 阅读
全球人工智能与机器人峰会正式开幕:人工智能的现状与未来及瓶颈

智能玻璃开启的新未来是什么样的

许多现代智能手机所采用的复杂人脸识别技术有朝一日可能会得到高科技升级,其声音和外观都出人意料地低技术....
发表于 07-16 11:51 62次 阅读
智能玻璃开启的新未来是什么样的

人工智能和区块链两项技术的结合会带来什么

人工智能(AI)这个词现在最常用,简单地说,就是建造能够执行似乎需要智能的任务的机器的理论和实践。
发表于 07-16 11:03 22次 阅读
人工智能和区块链两项技术的结合会带来什么

人工智能破译三千年前的古文字

从未被成功翻译的语言或将成为下一个被翻译对象。
的头像 大数据文摘 发表于 07-16 10:42 135次 阅读
人工智能破译三千年前的古文字

人工智能、机器学习正在重新定义网络安全

不说废话,数据见!
的头像 人工智能观察 发表于 07-16 09:55 299次 阅读
人工智能、机器学习正在重新定义网络安全

德阳市公安局交警支队与海康威视签订合作协议智慧交通领域展开

近日,德阳市公安局交通警察支队与海康威视签订战略合作协议。此次签约,标志着双方建立了稳固的战略合作伙....
的头像 海康威视 发表于 07-16 09:46 121次 阅读
德阳市公安局交警支队与海康威视签订合作协议智慧交通领域展开

人工智能和机器学习有何不同

机器学习已经与统计学,数据挖掘和预测分析联系在一起,有些人认为它应该被归类为与人工智能分开的领域。
发表于 07-16 09:13 22次 阅读
人工智能和机器学习有何不同

人工智能一定需要大数据吗

数据量大到一定程度的,并且经过格式化规范化处理后可以用于分析、挖掘和各种计算使用的数据就是大数据。
发表于 07-16 09:04 38次 阅读
人工智能一定需要大数据吗

机器视觉——机械设备的“慧眼”

工业环节的人工智能应用,多数都与机器视觉技术有关。
的头像 高工机器人 发表于 07-16 09:00 180次 阅读
机器视觉——机械设备的“慧眼”

人工智能的神奇复活

1月底,计算领域经历了两个不同寻常的里程碑——很多人都没有注意到。一个记录了开拓者的逝去:人工智能(AI)领域先驱、导师Ma...
发表于 07-16 09:00 54次 阅读
人工智能的神奇复活

人工智能现阶段应用的领域有哪些

人工智能技术也是国家主导的八大高新领域之一,也是国家主导的发展方向。
发表于 07-16 08:59 35次 阅读
人工智能现阶段应用的领域有哪些

人工智能时代已经来了

人工智能的时代已经到来,不再是噱头,不再是理论。
发表于 07-16 08:56 35次 阅读
人工智能时代已经来了

智能语音机器人的使用误区你中了几个

电销机器人=AI人工智能+语音识别技术+语音知识库+话术逻辑+智能学习的科技进化的产物。
发表于 07-16 08:53 38次 阅读
智能语音机器人的使用误区你中了几个

人工智能应该如何去转型

虽然以前有过技术革命,但人工智能可能是我们所经历过的最具变革性的技术。
发表于 07-16 08:49 33次 阅读
人工智能应该如何去转型

人工智能应用阿尔茨海默症检测,全球共话A.I.+医疗

据了解,中国阿尔茨海默症患者数世界第一,患病趋势日趋年轻化。
的头像 科大讯飞 发表于 07-16 08:47 125次 阅读
人工智能应用阿尔茨海默症检测,全球共话A.I.+医疗

人工智能引领现代农业的未来

机器学习可以揭示最佳的生长条件,以便尽可能的展现口感和其他特征。
发表于 07-16 08:44 470次 阅读
人工智能引领现代农业的未来

人工智能真的会给销售这个行业带来改变吗

在人机对比过程过程中机器人基本上是能够帮助我们完成前期筛选工作的,而且能让业务员自身提高工作效率的。
发表于 07-16 08:34 15次 阅读
人工智能真的会给销售这个行业带来改变吗

自动导引车案例

作者:Alix Paultre, Embedded Computing Design 在工厂自动化、仓库配货以及其他物料运输环境中正在采用自动导引车 (AG...
发表于 07-16 07:14 34次 阅读
自动导引车案例

【技术杂谈】用python实现自己的小说阅读器

前一段时间书荒的时候,在喜马拉雅APP发现一个主播播讲的小说-大王饶命。听起来感觉很好笑,挺有意思的,但是只有前200张是免...
发表于 07-16 04:00 195次 阅读
【技术杂谈】用python实现自己的小说阅读器

又一重大技术突破!3D打印这不是科幻,是现实

据路透和法新社报道,以色列特拉维夫大学一个团队的研究人员用革命性的3D打印技术,利用取自病人自身的人....
的头像 WPR 发表于 07-15 17:05 360次 阅读
又一重大技术突破!3D打印这不是科幻,是现实

行业 | 人工智能的快速发展将为传统制造业带来怎样的改变呢?

随着《中国制造2025》文件的印发,我国开始迈上从制造大国向制造强国的转型之路。
的头像 OFweek工控 发表于 07-15 17:00 269次 阅读
行业 | 人工智能的快速发展将为传统制造业带来怎样的改变呢?

易观智库《互联网教育市场专题研究报告》显示新一轮“婴儿潮”!

过去的十年,抓住房地产和金融二者之一,基本上不会过得太差。如果说上一轮资产飙升,是“胆大的”淘汰“胆....
的头像 WPR 发表于 07-15 16:58 170次 阅读
易观智库《互联网教育市场专题研究报告》显示新一轮“婴儿潮”!

人工智能进医院实习的结果怎么样

虽然目前人工智能在医疗中的使用还处于辅助阶段,并未正式进入临床,但它确确实实地帮助了医生有效节省了劳....
发表于 07-15 16:36 20次 阅读
人工智能进医院实习的结果怎么样

人工智能如何分辨谣言

即以AI技术打假为主、以人工审核为辅,AI还不能替代专家。
发表于 07-15 16:30 29次 阅读
人工智能如何分辨谣言

人工智能为非洲变革赋能!

不论人们相不相信,但 AI 研究的未来必定在非洲。
的头像 DeepTech深科技 发表于 07-15 16:21 156次 阅读
人工智能为非洲变革赋能!

为什么人工智能仍是企业优先布局工作

对于许多组织来说,数字化转型的迅速发展将AI推到了公司发展的首要之务。
发表于 07-15 16:12 25次 阅读
为什么人工智能仍是企业优先布局工作

如何预防大面积停电

除了对于居民直接居住体验的影响之外,都市级的大面积断电所带来的伤害是长期并且多方面的。
发表于 07-15 15:58 40次 阅读
如何预防大面积停电

如何用AI打造线上社群的西部世界

构建在区块链之上的“AI机器人管家”Jarvis+,在满足社群运营的基础之上,将用户和平台进行链接,....
发表于 07-15 15:49 27次 阅读
如何用AI打造线上社群的西部世界

物联网又一场伟大的革命、人工智能生态圈健康持续发展

物联网是继工业和信息化革命后的又一场伟大的革命,带来了全球第三次信息化浪潮,引领人类社会进入一个崭新....
的头像 物联之家网 发表于 07-15 15:44 219次 阅读
物联网又一场伟大的革命、人工智能生态圈健康持续发展

人工智能时代真的不能为文科生分一杯羹吗?

在每个领域足够出色,我们都可以有光明的前途。
的头像 新智元 发表于 07-15 15:13 79次 阅读
人工智能时代真的不能为文科生分一杯羹吗?

苹果造车——新专利让“停车即充电”成为可能

本周四,苹果公布了一项关于自动驾驶汽车的无线充电系统的专利申请,这再一次显示了苹果在自动驾驶汽车上的....
的头像 无线充电研究院 发表于 07-15 15:10 309次 阅读
苹果造车——新专利让“停车即充电”成为可能

FPGA市场年均增长10%,国产FPGA厂商谁有机会出头?

据MRFR统计2018年全球FPGA市场规模为60亿美元左右,随着AI+5G的应用逐步展开,其市场规....
的头像 荷叶塘 发表于 07-15 14:56 1478次 阅读
FPGA市场年均增长10%,国产FPGA厂商谁有机会出头?

人工智能的三波浪潮

为人工智能的未来发展方向,重点是为人工智能平台增加背景和信任。
发表于 07-15 14:46 33次 阅读
人工智能的三波浪潮

人工智能将如何改变你的交易

机器学习利用神经网络或其它学习方法鉴别、分析、预测特征或因子,这些特征或因子具有经济价值,可用于构建....
发表于 07-15 14:44 31次 阅读
人工智能将如何改变你的交易

人工智能现在还在资本风口吗

人工智能与传统产业的融合发展,正在成为中国经济转型升级的重要驱动力。
发表于 07-15 14:38 17次 阅读
人工智能现在还在资本风口吗

人工智能如何破解支付延迟的问题

支付延迟是全世界的通病,需要消耗巨大的人力资源和社会成本。
发表于 07-15 14:29 24次 阅读
人工智能如何破解支付延迟的问题

实现全自动驾驶尚需要众多技术革新之一智能网联汽车介绍

汽车行业的全自动驾驶技术,已经取得了突飞猛进的进展。 仅从日本市场看,在新车中,不仅高级轿车甚至连普通轿车和微型轿车均...
发表于 07-12 04:20 176次 阅读
实现全自动驾驶尚需要众多技术革新之一智能网联汽车介绍

嵌入式智能传感器的定义及特点

作者:王立刚 引言 传感器技术是一项当今世界令人瞩目的迅猛发展起来的高新技术之一,也是当代科学技术发展的一个重要标志...
发表于 07-09 06:03 286次 阅读
嵌入式智能传感器的定义及特点

【Toybrick RK3399Pro AI开发板试用体验】ACT I:开箱+板载资源详解

很开心,在90+的申请者中脱颖而出,得到RockChip以及发烧友的青睐,获得本次Toybrick TB-RK3399Pro开发板试用机会,同...
发表于 07-06 17:29 276次 阅读
【Toybrick RK3399Pro AI开发板试用体验】ACT I:开箱+板载资源详解

【Toybrick RK3399Pro AI开发板试用申请】机器人激光与视觉融合的导航模块

项目名称:机器人激光与视觉融合的导航模块 试用计划:申请理由 本人在机器人SLAM领域有4年开发经验,从最开始激光SL...
发表于 07-03 10:50 297次 阅读
【Toybrick RK3399Pro AI开发板试用申请】机器人激光与视觉融合的导航模块

【Toybrick RK3399Pro AI开发板试用申请】AI图形识别+语音识别

项目名称:AI图形识别+语音识别 试用计划:本人一直致力于各种AI智能平台以及物联网硬件平台的推广和试用,Toybrick RK...
发表于 07-03 10:48 294次 阅读
【Toybrick RK3399Pro AI开发板试用申请】AI图形识别+语音识别

2019年人工智能技术峰会落幕,大咖演讲PPT火热出炉!

2019年6月28日,由主办,深圳市机器人协会、深圳市人工智能行业协会和华强智慧网联合主办的“2019年人工智能技术峰会”在深圳成功...
发表于 07-02 16:36 1268次 阅读
2019年人工智能技术峰会落幕,大咖演讲PPT火热出炉!

NLPIR大数据知识图谱完美展现文本数据内容

  随着科学技术的发展,中文信息处理已经深入到了社会生活的各方面。广泛的应用对中文信息处理技术也提出了较高的要求。中文信...
发表于 07-01 11:40 253次 阅读
NLPIR大数据知识图谱完美展现文本数据内容