【四旋翼飞行器】76小时吃透四轴算法!史上最强软硬结合实战项目,👉戳此立抢👈

利用对抗性深度强化学习来衡量自动驾驶汽车的运动规划和碰撞避免机制的可靠性

智车科技 2018-06-08 09:54 次阅读

现如今,随着人工智能技术的迅速发展,人们普遍认为,未来的交通系统将由自动驾驶汽车(AV)所主导。可以说,对于更为安全的交通设施的需求是引起人们对自动驾驶汽车感兴趣并推动其发展的一个主要推动力。但不可否认,就现在而言,可靠和具有鲁棒性的自动驾驶汽车技术的发展仍然是一个持续的挑战,对可靠的运动规划和碰撞避免机制的研究尤其重要。最近,堪萨斯州立大学(Kansas State University,KSU)的科学家了提出了一种基于深度强化学习的新框架,用于对自动驾驶汽车的碰撞避免机制的行为进行基准测试。

现如今,随着人们对自主导航的兴趣日益增长,关于运动规划和碰撞避免技术(collision avoidance techniques)的研究已经加速了全新提议和新进展的速度。然而,新技术的复杂性及其安全性要求使得当前的大部分基准测试框架不充分,因此对高效的比较技术的需求没有得到满足。这项研究提出了一种基于深度强化学习的新框架,用于在处理最佳对抗性智能体的最坏情况下对碰撞避免机制的行为进行基准测试,该最佳对抗性智能体进行训练从而将系统驱动到不安全状态。我们将这个框架的体系结构和流程描述为一个基准测试解决方案,并通过一个比较两种碰撞避免机制的可靠性的实际案例研究来证明其有效性,从而对有意识的碰撞尝试做出回应。

人们普遍认为,未来的交通系统将由自动驾驶汽车(AV)所主导。随着近年来这一领域的迅速发展,许多人预测这种转变将在未来十年内发生。对更为安全的交通运输的需求,是引起人们兴趣和推动自动驾驶汽车发展的一个主要动机。一般认为,用专家计算模型代替人类驾驶员的内在缺陷,可以显著减少由驾驶员的误差所导致的事故数量。然而,可靠和具有鲁棒性的自动驾驶汽车技术的发展仍然是一个持续的挑战,并且人们正在积极从各个研究和发展方向来追求这一目标。

图1:对抗性目标的图释

对可靠的运动规划和碰撞避免机制的研究尤其重要。在过去数十年的时间里,科学家们已经提出了许多解决这个问题的方法,从控制理论形式化和最优控制方法到潜在的基于场和规则的技术(field- and rule-based techniques),等等。最近,机器学习的进步使得基于诸如模仿学习和深度强化学习(RL)等技术的全新数据驱动的碰撞避免方法成为可能。然而,随着其部署环境和机制日益复杂,为这些解决方案提供安全保障的挑战变得越来越困难。一个值得注意的例子是交通碰撞避免系统(TCAS),在它广泛部署到NextGen商用飞机之前,它就已经满足了联邦航空局(FAA)的严格安全要求。然而,最近的一些表现表明它在现代高密度空域中非常不可靠,在一定程度上,它可能会导致不可避免的碰撞状态(ICS)——不管未来的轨迹如何,最终都会发生碰撞。此外,最近的研究表明,自动感知和避免机制可以被对抗性地加以利用以操纵自动驾驶车辆的运动轨迹。

作为回应,科学家们提出了越来越多的缓解技术和全新的安全运动规划方法,但每一种都有特定的特定于案例的假设和验证程序。因此,对这些方法进行定量比较变得非常困难。当前最为先进的方法包括在运动规划和碰撞避免中对安全行为进行基准测试的几次尝试,但是许多现有的框架未能满足基于机器学习的新自适应技术的要求。而且,目前的基准测试框架并不能提供全面的和具有鲁棒性的探测机制,用于在不理想状态和轨迹的复杂空间中进行探索。这种框架中的突出方法是基于随机化或基于情景的障碍产生,这些障碍很容易丢失特定于被测机制的关键ICS或其他不需要的状态。这些框架中的另一种方法依赖于计算上昂贵的碰撞状态可达性分析技术,而这也无法为安全运行的关键边界提供具体的保证。

图2:实验环境设置

为了弥补以安全为中心的基准测试的缺陷,本文提出了一种基于机器学习的新框架,用于在与最优对抗性智能体进行交互的最坏情况下对新技术的可靠性进行基准测试。该框架采用深度强化学习的强大的探索和优化性能来训练对抗性自主智能体,而该智能体的目标是学习旨在将系统驱动到ICS和其他不安全状态的最佳导航策略。根据分析的参数和目标,这些目标可能包括对抗性智能体与自动驾驶汽车的直接碰撞,或利用避免碰撞机制来操纵自动驾驶汽车的轨迹以改变和控制其路径,或间接诱发自动驾驶汽车和环境中的其他物体之间的碰撞。

在此基础上,这项研究的主要贡献包括:

1)提出碰撞避免算法的最坏情况基准测试的计算框架和处理流程,且独立于其复杂性、随机性以及自适应动力学。

2)提出深度强化学习过程流程以无缝地适应于被测系统,并克服完全随机或基于情景的探索机制的缺点。

3)提出关于碰撞避免算法标准化比较的全新的衡量指标。

4)通过一个比较两种碰撞避免机制应对故意碰撞企图的可靠性的实际案例研究,来证明所提出框架的实际应用和效果。

图3:实验结果——平均超过100次运行

总而言之,在本文中,我们提出了一个流程和框架,它利用对抗性深度强化学习来衡量自动驾驶汽车的运动规划和碰撞避免机制的可靠性。我们已经确立了这一框架的优势,要超过当前的基准测试规划,其中包括灵活性和通用性、通过针对特定系统下测试、样本效率和自定义探索机制对对抗性策略进行训练获得的适用性探测,以及为不同系统之间的基准测试和比较提供基线(例如,最坏的情况)测量。

可以这样说,本文所提出框架的直接架构为进一步研究提供了一些潜在的研究领域。紧随而来的下一个步骤就是将此框架应用于显著的和最近发布的运动规划和碰撞避免技术中,目的是为相关研究项目创建参考基准。另一个有发展前景的研究领域是检查近期发布技术的适用性,这些已发布的技术声称在对抗性干扰下进行训练可以增强策略的适应力和鲁棒性。因此,通过对对抗性策略和碰撞避免的强化学习模型的结合性训练进行调查,可能会出现潜在的缓解和防御技术。

原文标题:对抗强化学习最新研究:可用于自动驾驶汽车「碰撞避免机制」检测

文章出处:【微信号:IV_Technology,微信公众号:智车科技】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
分享:

评论

相关推荐

传统汽车厂商布局自动驾驶 科技巨头也不落后

对于全球汽车市场而言,平台化、轻量化、节能化、电子化、智能化以及安全化等已成为汽车领域发展的主要方向....
的头像 满天芯 发表于 01-18 11:21 10次 阅读
传统汽车厂商布局自动驾驶 科技巨头也不落后

人工智能对制药业有着巨大的潜在利益

人工智能对制药业有着巨大的潜在利益,从提高研发生产力到提高企业销售额和更好的供应链管理。考虑到人工智....
发表于 01-18 11:17 3次 阅读
人工智能对制药业有着巨大的潜在利益

人工智能和机器学习正在越来越多的为工作平台和工具提供动力

金融行业正在以各种方式使用这些技术,从回答基本客户问题的聊天机器人,到帮助防止欺诈和洗钱的人工智能平....
发表于 01-18 11:14 4次 阅读
人工智能和机器学习正在越来越多的为工作平台和工具提供动力

人工智能并不是无所不能 已经被“神化”了

未来的科技,就算真可以“无所不能”,也还是有很长的路要走,并不是一蹴而就的。“无所不能”也必然会是那....
发表于 01-18 11:09 4次 阅读
人工智能并不是无所不能 已经被“神化”了

评估互联网未来情况和营销相关见解

联网的发展趋势日新月异,有必要跟上步伐,做好对未来的预判和应对策略,以避免被市场淘汰。
的头像 PCB开门网 发表于 01-18 11:05 29次 阅读
评估互联网未来情况和营销相关见解

2019年成中国机器人行业转型元年

据悉,中国机器人产业在经历了2013年至2017年高速发展的五年,产业规模不断扩大,平均增速超过15....
的头像 天津机器人 发表于 01-18 10:59 34次 阅读
2019年成中国机器人行业转型元年

人工智能领域的发展历史总共经历了三次大浪潮

人工智能也被称为AI,是将新型机器赋予机器思维,代替人脑进行各种计算、决策和分析,有效解放人们双手的....
发表于 01-18 10:59 5次 阅读
人工智能领域的发展历史总共经历了三次大浪潮

人工智能在汽车上的发展远比我们大家想得要快

“人工智能”是近年来非常热门的一个词,不论是在哪个领域,都能有它的身影,这其中自然也包括了汽车行业。....
发表于 01-18 10:52 3次 阅读
人工智能在汽车上的发展远比我们大家想得要快

人工智能究竟会不会迎来第三个冬天?

企业变精明了。想要卖出大型人工智能项目越来越难,不少咨询公司也从卖人工智能咨询退回到了卖廉价的Das....
的头像 电子发烧友网工程师 发表于 01-18 10:52 31次 阅读
人工智能究竟会不会迎来第三个冬天?

随着人工智能的增长 未来将会催生约13%的新工作机会

人生已经如此艰难,偏偏AI(人工智能)还来抢饭碗。如今,已经有不少岗位逐渐被AI取代。不过莫慌,今天....
发表于 01-18 10:46 7次 阅读
随着人工智能的增长 未来将会催生约13%的新工作机会

俄罗斯的自动驾驶技术不容忽视

难道俄罗斯因为经济原因,并没有在发展自动驾驶技术?其实俄罗斯的自动化技术也不容小觑,例如在机器人和自....
发表于 01-18 10:33 5次 阅读
俄罗斯的自动驾驶技术不容忽视

如果AI是你的完美恋人,你会爱上他吗

但是,如果生活中突然出现了这样一个人。 他学习了全世界的情话只为讲给你一个人听;
发表于 01-18 10:27 10次 阅读
如果AI是你的完美恋人,你会爱上他吗

1月的榜单中,Python已经走上卫冕的道路

除了大家熟悉的微软、知乎、豆瓣,已经有越来越多的公司开始用Python来快速搭建网站产品。相应的,也....
的头像 电子发烧友网工程师 发表于 01-18 10:23 35次 阅读
1月的榜单中,Python已经走上卫冕的道路

2019年的人工智能 充满了刺激与挑战

看起来很繁荣对不对?但如果不是现实急迫,巨额的融资并不是创业企业最好的选择——除了稀释股份、抬高估值....
发表于 01-18 10:23 6次 阅读
2019年的人工智能 充满了刺激与挑战

人工智能技术如何优化传感器系统

工信部于2018年12月正式印发了《促进新一代人工智能产业发展三年行动计划》,为2018年到2020....
的头像 电子发烧友网工程师 发表于 01-18 10:20 43次 阅读
人工智能技术如何优化传感器系统

中国车企“围剿”特斯拉,挖到高管就是头彩

拜腾由腾讯等投资,去年融资5亿美元,除了从特斯拉(法乐第未来)挖来魏思涛外,该公司还从苹果挖来设计师....
的头像 新智元 发表于 01-18 10:18 44次 阅读
中国车企“围剿”特斯拉,挖到高管就是头彩

通用电气认为 人工智能可以具备一定程度的谦逊

通用电气认为,人工智能可以具备一定程度的谦逊,算法将有足够的意识来了解它们不知道的东西。
发表于 01-18 10:14 5次 阅读
通用电气认为 人工智能可以具备一定程度的谦逊

我国今年将实现首个5G自动驾驶示范应用落地

周舟表示,5G具有超大带宽、超低时延和超大接入量等特点,相比4G网络,峰值速率提升在20倍以上。然而....
发表于 01-18 10:00 8次 阅读
我国今年将实现首个5G自动驾驶示范应用落地

人工智能可能会替代人类吗

有很多人对人工智能的到来非常担忧,究其原因,就是现在科幻电影的发展,人们担心未来人工智能可能会替代人....
的头像 电子发烧友网工程师 发表于 01-18 09:25 41次 阅读
人工智能可能会替代人类吗

自动驾驶除了应用于汽车领域 还能放在船上

如今自动驾驶汽车颇受关注,如果说将自动驾驶技术放在船上,那可能又是一件完全不同的事情了,但受限于技术....
发表于 01-18 09:22 6次 阅读
自动驾驶除了应用于汽车领域 还能放在船上

安永发布报告:只有5%的公司可以熟练运用AI

1月17日,安永发布题为《机器人技术与智能自动化——人类与机器力量的结合》的报告。这份报告着重分析了....
发表于 01-18 09:20 9次 阅读
安永发布报告:只有5%的公司可以熟练运用AI

华为或将成为智能网联汽车时代的最大赢家

在即将过去的这周,被华为公关关系部逼着的华为创始人任正非,罕见的连续几天接受了中外媒体的采访,回答了....
发表于 01-18 09:15 12次 阅读
华为或将成为智能网联汽车时代的最大赢家

以色列报告表示 人工智能技术有望成为经济增长的关键引擎

以色列创新局14日发布一份关于高科技发展的报告说,人工智能技术有望成为经济增长的关键引擎,以色列需要....
发表于 01-18 09:11 18次 阅读
以色列报告表示 人工智能技术有望成为经济增长的关键引擎

在全球人口老龄化危机的背景下 人工智能发挥的作用越来越大

随着全球人口老龄化程度的日益加深,人口年龄结构的变化正在广泛地影响着人类社会生活的各个方面,人口老龄....
发表于 01-18 09:06 8次 阅读
在全球人口老龄化危机的背景下 人工智能发挥的作用越来越大

未来人工智能将成为零售业的主流技术

多位业内人士日前在美国全国零售商联合会年度大会上表示,未来人工智能将成为零售业主流技术,并将在很大程....
发表于 01-18 09:02 9次 阅读
未来人工智能将成为零售业的主流技术

人工智能是当前科技发展的热点 也是世界经济与社会发展的重要杠杆

人工智能是当前科技发展的热点,也是世界经济与社会发展的重要杠杆。近日,上海理工大学举行2019国际机....
发表于 01-18 09:00 8次 阅读
人工智能是当前科技发展的热点 也是世界经济与社会发展的重要杠杆

探析人工智能在心电图低价检验中的应用

明尼苏达州罗切斯特- Mayo Clinic的一项研究发现,将人工智能应用于一种广泛可用的低价检验 ....
的头像 1号机器人网 发表于 01-18 08:58 60次 阅读
探析人工智能在心电图低价检验中的应用

5G自动驾驶中国移动与联通开始了新一轮的联盟战

2009年3月,广汽丰田与雷克萨斯正式导入丰田在日本已经应用两年的车联网系统G-book。从安全入手....
发表于 01-18 08:56 7次 阅读
5G自动驾驶中国移动与联通开始了新一轮的联盟战

2018年智能机器人产业在消费市场日渐丰富 各独角兽迎风而起

2018年以来,全球芯片、互联网巨头都在不断发力,奋力加强人工智能领域的布局,其中就包括NVIDIA....
发表于 01-18 08:45 5次 阅读
2018年智能机器人产业在消费市场日渐丰富 各独角兽迎风而起

确保“耗电之王”物联网de高能效

在终端节点方面,正如前面所透露的,预测到2021年将部署数百亿个节点。它们中的每一个都会有非常低的功....
的头像 安森美半导体 发表于 01-17 17:49 292次 阅读
确保“耗电之王”物联网de高能效

基于计算机视觉的自动搜索图像语义分割架构

在计算机视觉中,这适用于图像分类和密集图像预测。
的头像 智车科技 发表于 01-17 17:31 124次 阅读
基于计算机视觉的自动搜索图像语义分割架构

当波尔舍与福特两大汽车世家牵手,温情背后的博弈自此将涌动暗流

更重要的是,这次“婚姻”能将大众和福特带向何方?结盟带来的劲风,隐隐有演变为吞并的风暴之势,如果不能....
的头像 汽车工程师 发表于 01-17 17:25 189次 阅读
当波尔舍与福特两大汽车世家牵手,温情背后的博弈自此将涌动暗流

Alphabet测试新无人机识别系统,为无人机大规模商用铺路

据悉,2018马云乡村教师奖颁奖典礼于1月13日-14日在海南三亚举行,从2015年开始,每年的腊八....
的头像 机器人大讲堂 发表于 01-17 17:05 202次 阅读
Alphabet测试新无人机识别系统,为无人机大规模商用铺路

嵌入式硬件的七项技术创新及其应用预测

机器人出租车绝对将会在2019年内推出上路。有许多投资方和合资企业都致力于推出这些自动驾驶的车辆,诸....
的头像 嵌入式资讯精选 发表于 01-17 16:56 225次 阅读
嵌入式硬件的七项技术创新及其应用预测

通用人工智能面临的挑战,人工智能和算法偏见

如今大多数的人工智能系统都不具备很好的扩展能力。AlphaZero、AlphaGo、OpenAI F....
的头像 人工智能学家 发表于 01-17 16:53 182次 阅读
通用人工智能面临的挑战,人工智能和算法偏见

盘点2018年智能网联汽车及出行投融资排行

TOP100投资案例的金额总计258.77亿美元,其中共享出行有47起,新能源汽车有21起,自动驾驶....
的头像 佐思汽车研究 发表于 01-17 16:49 212次 阅读
盘点2018年智能网联汽车及出行投融资排行

2019中国机器人行业年会在北京盛大开幕

虽然目前脑科学还没有真正搞清楚,但如果将已有的成果与信息科学交叉融合,便产生了我们所说的类脑机器人。....
的头像 人工智能学家 发表于 01-17 16:49 168次 阅读
2019中国机器人行业年会在北京盛大开幕

爱思唯尔发布了《人工智能:知识的创造、转移与应用》报告

报告显示在全球范围内,人工智能研究在过去五年(2013年至2017年)以每年接近13%的速度快速增长....
的头像 人工智能学家 发表于 01-17 16:46 93次 阅读
爱思唯尔发布了《人工智能:知识的创造、转移与应用》报告

赛灵思在CES上重点瞄准自动驾驶 助力推动中国汽车的进步

美国拉斯韦加斯最知名的莫过于刺激的博弈、华丽的娱乐大秀、无限畅食的自助餐以及 CES 全球最大消费电....
发表于 01-17 16:45 62次 阅读
赛灵思在CES上重点瞄准自动驾驶 助力推动中国汽车的进步

探究自动驾驶对城市交通出行的影响

自动驾驶已是呼之欲出的近未来事件,将成为汽车发明以来城市交通出行的最大变革。
的头像 智车科技 发表于 01-17 16:21 196次 阅读
探究自动驾驶对城市交通出行的影响

群体智能协同如何控制基于车路协同的交通系统

基于车路协同的重新构建的复杂交通系统,必须采用群体智能协同控制的方式来解决。
的头像 智车科技 发表于 01-17 16:11 171次 阅读
群体智能协同如何控制基于车路协同的交通系统

Web安全工程师必备技能

例如需要自己写一款适合此刻情景漏洞的工具,如果不会写会极大降低效率。再者就是关于后续进阶的代码审计问....
的头像 Linux爱好者 发表于 01-17 15:59 133次 阅读
Web安全工程师必备技能

智能家居迎来爆发式增长 改善其设备的交互性和易用性迫在眉睫

在2018年,智能家居又迎来了惊人的增长,据研究机构估计,智能家居产品去年的出货量增长了39%。目前....
发表于 01-17 15:54 27次 阅读
智能家居迎来爆发式增长 改善其设备的交互性和易用性迫在眉睫

安防企业不再满足于传统安防的单一领域 不断拓展产业纵深发展

随着多维感知、图像视觉、大数据等技术在安防领域的成熟规模应用,安防企业不再满足于传统安防的单一领域,....
发表于 01-17 15:45 26次 阅读
安防企业不再满足于传统安防的单一领域 不断拓展产业纵深发展

国内两大人工智能产业协同平台落户南京

近日,中国人工智能学会会员服务中心江苏站(以下简称江苏站)和国家工业信息安全发展研究中心(以下简称中....
的头像 机器人技术与应用 发表于 01-17 15:13 126次 阅读
国内两大人工智能产业协同平台落户南京

如何使用稀疏卷积特征和相关滤波进行实时视觉跟踪算法

为提高分层卷积相关滤波视觉跟踪算法的实时性能,提出一种稀疏卷积特征的实时目标跟踪算法。首先,在分析不....
发表于 01-17 15:12 26次 阅读
如何使用稀疏卷积特征和相关滤波进行实时视觉跟踪算法

人工智能在供应链管理中的应用

机器学习在有大数据的情况下学习效果最好。这些系统学习的速度就越快。在很多情况下,供应链应用程序将需要....
的头像 AI人工智能D1net 发表于 01-17 15:04 172次 阅读
人工智能在供应链管理中的应用

2019年的八大AI趋势浅析

人工智能(AI)可以说是近几十年来最具革命性的技术了,不论是Google、Facebook、Inte....
发表于 01-17 15:03 46次 阅读
2019年的八大AI趋势浅析

健康管理服务存缺口 AI助力智慧管理

数据显示,我国健康产业每年增速始终保持在10%以上,截止2016年末已超过3.2万亿市场规模。健康管....
发表于 01-17 14:59 21次 阅读
健康管理服务存缺口 AI助力智慧管理

2019北京消费电子展:智能语音成消费电子发展新引擎

随着互联网概念的遍及,人工智能的快速发展,中国在智能语音技术的专利数量持续增长,通过庞大的用户群基础以及互联网系统优势明...
发表于 01-11 17:13 123次 阅读
2019北京消费电子展:智能语音成消费电子发展新引擎

自动驾驶汽车时代:天线测量与模拟比任何时候都来得关键

自动驾驶汽车和互联汽车的出现对无线连接测试领域提出了更高要求,尤其是汽车产业正在推行的汽车到万物(V2X)技术。这项前沿技...
发表于 01-08 10:53 238次 阅读
自动驾驶汽车时代:天线测量与模拟比任何时候都来得关键

在指甲上贴一个可穿戴传感器,你的健康状况“尽收眼底”

一个小型指甲可穿戴传感器可以监测疾病和病症,这在近期的IBM故事中得到了解释。该团队设计了这些小型传感器,可以帮助临床医...
发表于 01-06 20:46 123次 阅读
在指甲上贴一个可穿戴传感器,你的健康状况“尽收眼底”

2019亚洲消费电子展(CEE Asia)

2019北京国际消费电子博览会 2019北京国际消费电子博览会 2019北京国际消费电子博览会 Beijing International Consumer E...
发表于 01-05 16:41 149次 阅读
2019亚洲消费电子展(CEE Asia)

官方推荐2019第二十二届中国人工智能产业博览会

人工智能(Artificial Intelligence),英文缩写为AI。它是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用...
发表于 01-05 14:42 142次 阅读
官方推荐2019第二十二届中国人工智能产业博览会

在指甲上贴一个可穿戴传感器,你的健康状况“尽收眼底”

可穿戴传感器可以监测疾病和病症,这在近期的IBM故事中得到了解释。该团队设计了这些小型传感器,可以帮助临床医生通过人工智...
发表于 01-03 21:31 120次 阅读
在指甲上贴一个可穿戴传感器,你的健康状况“尽收眼底”

高效的PC端车牌识别在人工智能机器人领域的应用

车牌识别SDK、车牌OCR、车牌识别软件、车牌识别系统、车牌识别技术、汽车号牌识别、号牌识别软件、车牌识别方案 DSP车牌...
发表于 01-02 16:59 201次 阅读
高效的PC端车牌识别在人工智能机器人领域的应用

数据如何改变现代农业

数字技术正在向农业领域蔓延,帮助确保日益增长的食物需求。 机械化是我们目前看到的大规模农作物生产的关键,但它远非完美。需...
发表于 01-02 09:27 195次 阅读
数据如何改变现代农业

AI人工智能与机器智能:未来事实还是幻想?

一群杰出的科学家 - 斯蒂芬霍金,斯图尔特罗素(伯克利)和马克斯泰格马克(麻省理工学院) - 可能受到电影超越的刺激甚至可能是...
发表于 12-31 16:42 268次 阅读
AI人工智能与机器智能:未来事实还是幻想?

555定时器构成汽车转向灯电路

谁能帮忙分析一下电路工作原理 感谢  可以有偿...
发表于 12-29 17:59 283次 阅读
555定时器构成汽车转向灯电路