张飞软硬开源基于STM32 BLDC直流无刷电机驱动器开发视频套件,👉戳此立抢👈

目标检测二十年的技术综述和总结及未来的发展方向详细分析

AI科技大本营 2019-06-16 10:43 次阅读

计算机视觉中的目标检测,因其在真实世界的大量应用需求,比如自动驾驶、视频监控、机器人视觉等,而被研究学者广泛关注。

几天前,arXiv新出一篇目标检测文献《Object Detection in 20 Years: A Survey》对该领域20年来出现的技术进行了综述,这是一篇投向PAMI的论文,作者们review了400+篇论文,总结了目标检测发展的里程碑算法和state-of-the-art,并且难能可贵的对算法流程各个技术模块的演进也进行了说明,还深入到目标检测的特定领域如人脸检测、行人检测等进行了总结,最后列举了未来可能的发展方向。

温故而知新,非常值得参考!

作者信息:

该文作者来自美国密歇根大学、北京航空航天大学、滴滴出行。

下图是作者在谷歌学术检索目标检测相关关键字返回的历年文献数量,可见该领域20年来越来越受到学术界的关注。2018年有将近1200篇相关文献发表。

目标检测路线图

作者将目标检测近20年来的里程碑算法画在时间轴上,如下:

可见作者将算法大致分为2012年之前的传统检测方法与2012年之后出现的基于深度学习的检测方法。

传统方法比如我们所熟知的V-J检测、HOG检测、DPM算法。

深度学习方法截然不同的分为两条技术路径:单阶段检测算法与两阶段检测算法。

同时作者把目标检测的一些精度提高的方法的出现也列在了时间轴上,比如bounding box regression、multi-resolution detection等。

在目前最知名的评估数据集 VOC 2007 、VOC 2012、 COCO 上不同年份出现的算法精度提高,如下图:

可见,深度学习在检测领域的开山之作 RCNN 取得了大幅度精度提高,开辟了检测的新时代。而今年新出的 TridentNet 是目前在 COCO 数据集上取得最高精度的算法。

目标检测数据集

作者总结了通用目标检测及几个特定目标检测的数据集。

通用目标检测领域常用数据集:

几个常用数据集的示例图片:

行人检测常用数据集:

人脸检测常用数据集:

文本检测常用数据集:

交通灯检测与交通标志检测常用数据集:

遥感目标检测常用数据集:

目标检测技术演进

作者将目标检测中涉及的各种技术的演进铺展开来,让我们能就单一技术看到发展路径。

早期目标检测算法代表:

多尺度检测技术演进路线图:

包围框回归技术演进路线图:

目标上下文建模技术演进路线图:

包围框非极大抑制(NMS)技术演进路线图:

难检测负样本挖掘技术演进路线图:

目标检测计算加速

目标检测天生是计算密集型任务,所以在其发展的各个阶段,目标检测算法的加速就一直是一个重要议题。

作者总结的目标检测计算加速方法:

可见主要是在三个层次加速:

数值计算层次(如积分图、矢量量化等)、

检测引擎层次(网络剪枝与量化、轻量级网络设计等)、

检测流程层次(特征图共享、分类器加速、级连检测等)。

因为目前CNN检测方法是主流,作者列出了近年出现的卷积计算的一些加速方法及其时间复杂度:

目标检测进展

作者在这部分描述了近三年来state-of-the-art目标检测技术的研究进展。

1. 更好地引擎(engine)

作者将深度学习目标检测网络的骨干网称为其引擎。改进目标检测的一个直接思路就是使用更加先进的骨干网。

如下图:

相同算法用相同颜色的圆点表示,使用相同引擎的算法结果用一个大括号连接,我们可以轻易看出,使用不同的引擎对最终精度的影响更大。

2. 使用更好的特征

作者主要指:1)特征融合;2)学习大感受野的高分辨率特征

3. 超越滑动窗口

不再是局限于候选区域再分类的模式。作者提到两种新模式:

1)子区域搜索 sub-region search。将目标检测看为从初始网格到最终ground truth box的路径规划过程。

2)关键点定位。将目标检测看为特定语义点定位的过程。

比如:

ECCV18 Oral | CornerNet目标检测开启预测“边界框”到预测“点对”的新思路

Grid R-CNN解读:商汤最新目标检测算法

4. 目标定位改进

1)包围框提精。

2)改进loss函数用于精确定位。比如:

5. 检测与分割一起进行

分割可以帮助目标检测提高类别识别的精度、获得更好地目标定位、嵌入更加丰富的上下文。

分割的网络可以作为目标检测的提取网络,也可以作为多任务学习的损失函数,用以改进目标检测。

6. 旋转和尺度变化鲁棒的目标检测

针对旋转变化鲁棒改进方向:

1)旋转不变损失函数;

2)旋转校正;

3)Rotation RoI Pooling。

针对尺度变化鲁棒的改进:

1)尺度自适应训练;

2)尺度自适应检测。

7. Training from Scratch

不使用预训练模型,从头开始训练目标检测网络。

8. 对抗训练

比如有研究表明,GAN可以用来改进小目标的检测。

9. 弱监督的目标检测

不使用包围框标注,而仅使用图像级的目标标注的算法。

减少标注成本,扩大训练集。

目标检测应用

作者列举了目标检测的几个特殊应用,包括行人检测、人脸检测、文本检测、交通灯及标志检测、遥感目标检测。

指出每种检测任务面临的困难和挑战,并简述了目前应对这些问题的方法。

目标检测的未来方向

作者列举的未来方向包括:

1. 轻量级目标检测算法;

2. 用AutoML设计目标检测算法;

3. 域适应(domain adaptation)改进目标检测;

4. 弱监督的目标检测;

5. 小目标检测;

6. 视频目标检测

7. 融合其他传感器信息的目标检测。

论文地址:

https://arxiv.org/abs/1905.05055v1

(*本文为 AI科技大本营转载文章,转载请联系作者)

公开课精彩推荐

本次课程将会介绍如何利用TensorRT加速YOLO目标检测,课程将会着重介绍编程方法。本次课程还会涉及到 TensorRT 中数据类型,流处理,多精度推理等细节的展示。本次课程特色是讲解+示例分享。本次课程中,QA也是一个非常精彩的环节。

推荐阅读

开源要自立?华为如何“复制”Google模式

谷歌用1.2万个模型“推翻”现有无监督研究成果!斩获ICML 2019最佳论文

24式,加速你的Python

荔枝“自由”?朋友,你实现了吗?

为防 Android 碎片化?Google 强迫开发者使用自有开发工具!

Docker 存储选型,这些年我们遇到的坑

制造业转型物联网,看博世如何破界

回报率850%? 这个用Python优化的比特币交易机器人简直太烧脑了...

面试阿里技术岗,竟然挂在第4 轮……

你点的每个“在看”,我都认真当成了喜欢

原文标题:继往开来!目标检测二十年技术综述

文章出处:【微信号:rgznai100,微信公众号:AI科技大本营】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
分享:

评论

相关推荐

视频监控最强实战教程

如果您正处于以下阶段:在校,但希望能提前学习到企业需要的专业技能,为以后找到更好的工作已工作,但希望能提升技能,在工作中
发表于 02-23 00:00 69057次 阅读
视频监控最强实战教程

自动驾驶量产路在何方

自动驾驶的量产,将成为中国智能产业的顶梁柱!
的头像 中国人工智能学会 发表于 07-20 10:39 122次 阅读
自动驾驶量产路在何方

国能与AutoX与达成战略合作在欧洲部署大规模的机器人出租车

据消息报道,瑞典电动汽车(EV)制造商国能(NEVS)与自动驾驶汽车初创公司AutoX达成了独家战略....
发表于 07-20 07:30 15次 阅读
国能与AutoX与达成战略合作在欧洲部署大规模的机器人出租车

行业 | 一辆自动驾驶车搭载IC半导体成本有多少?

根据统计,从Level 2系统须580美元到Level 4高达1760美元。
的头像 中科院长春光机所 发表于 07-19 15:16 413次 阅读
行业 | 一辆自动驾驶车搭载IC半导体成本有多少?

国内首个自动驾驶5G车联网示范岛开建

出现200台以上自动驾驶出租应用示范服务和10条以上自动驾驶公交应用示范线路服务,推动实现粤港澳大湾....
发表于 07-19 08:58 68次 阅读
 国内首个自动驾驶5G车联网示范岛开建

智能驾驶驱动77GHz毫米波雷达芯片市场起量 TI的哪些产品方案不容错过

77GHz毫米波雷达方案因为可以比24GHz雷达方案做得更小,已经成为汽车前向探测雷达的主流选择,德....
的头像 章鹰 发表于 07-18 17:38 795次 阅读
智能驾驶驱动77GHz毫米波雷达芯片市场起量 TI的哪些产品方案不容错过

CVPR获奖论文中有三大奖项的第一作者均有华人在列

最后,我们的方法与用于瞬态成像的特定技术无关。因此,我们展示了使用SPAD和超快激光从皮秒级瞬态恢复....
的头像 AI科技大本营 发表于 07-18 15:00 99次 阅读
CVPR获奖论文中有三大奖项的第一作者均有华人在列

自动驾驶的未来?Uber发布人工智能平台 马斯克发布脑机接口系统

Uber发布人工智能平台 Uber的人工智能部门(Uber AI)发布名为柏拉图研究对话系统(Pla....
发表于 07-18 14:59 246次 阅读
自动驾驶的未来?Uber发布人工智能平台 马斯克发布脑机接口系统

LaSOT数据集的构造原理和评估方法

图1:常用跟踪数据集统计示意图。包括OTB-2013、OTB-2015、TC-128、NUS-PRO....
的头像 AI科技大本营 发表于 07-18 14:52 141次 阅读
LaSOT数据集的构造原理和评估方法

技术的温度:用AI保护野生动物

他们使用的 SPOT 系统,由南加州大学社会人工智能中心的研究人员建造,先通过人工标记,以及无人机自....
的头像 AI科技大本营 发表于 07-18 10:15 202次 阅读
技术的温度:用AI保护野生动物

基于智能视频监控系统的Blackfin处理器应用

1.视频监控系统的现状 视频监控系统从最初的模拟闭路电视监控开始,经历了数字化,网络化的发展,正在向分布式、智能化的方...
发表于 07-18 08:09 111次 阅读
基于智能视频监控系统的Blackfin处理器应用

自动驾驶汽车会让交通变得更糟吗?

事实上,由于网约车服务的普及,许多城市的交通压力大幅增加。
的头像 中科院长春光机所 发表于 07-17 17:17 398次 阅读
自动驾驶汽车会让交通变得更糟吗?

大众与福特共推自动驾驶出租车服务

Argo AI作为一家自动驾驶汽车开发商,目前正负责部署福特的自动驾驶出租车服务。
的头像 机器人技术与应用 发表于 07-17 16:07 296次 阅读
大众与福特共推自动驾驶出租车服务

WiTricity与高通Halo的整合将推动无线充电的发展

在“电动+自动驾驶”这套未来出行交通系统中,无线充电可能是一个无法忽视的重要环节。
的头像 无线充电研究院 发表于 07-17 15:18 217次 阅读
WiTricity与高通Halo的整合将推动无线充电的发展

弥合人工视觉和触觉之间的差距

使用创新手套的物体操纵从而获得详细压力图的大型数据库。
的头像 传感器技术 发表于 07-17 15:01 73次 阅读
弥合人工视觉和触觉之间的差距

自动驾驶车要普及仍需克服两大挑战

产业需要克服两大挑战,即是科技与获利的商业模式。
发表于 07-17 11:39 134次 阅读
自动驾驶车要普及仍需克服两大挑战

一辆自动驾驶车搭载IC半导体成本有多少

随着摩尔定律及先进半导体技术加速发展力道,同时也将拉抬电动驾驶车(EV)的车用IC市场。
发表于 07-17 11:35 118次 阅读
一辆自动驾驶车搭载IC半导体成本有多少

Apollo开放全长380km点云数据集,助推厘米级精度定位实现

包含复杂场景,全场380km,新发布的Apollo点云数据集究竟有多厉害?
的头像 Apollo开发者社区 发表于 07-17 10:35 379次 阅读
Apollo开放全长380km点云数据集,助推厘米级精度定位实现

5G时代,为机器装上大脑,地平线如何做?

5G牌照发放,边缘计算兴起,地平线如何看待边缘计算中AI芯片的发展趋势?边缘计算会破解AI物联网哪些....
的头像 章鹰 发表于 07-16 19:23 1146次 阅读
5G时代,为机器装上大脑,地平线如何做?

无人驾驶等于自动驾驶吗

虽然研发自动驾驶汽车非常昂贵,但是一旦成为主流,可以节省大量费用。
发表于 07-16 17:02 154次 阅读
无人驾驶等于自动驾驶吗

自动驾驶汽车也能「无线充电」!

近日苹果公司则已经申请了电动汽车的无线充电专利。
的头像 iPhone频道 发表于 07-16 16:25 434次 阅读
自动驾驶汽车也能「无线充电」!

V2X将如何影响自动驾驶车辆的未来?

预计2019年至2022年期间,全球V2X通信技术支出将增长170%以上,V2X市场价值12亿美元。
发表于 07-16 15:25 324次 阅读
V2X将如何影响自动驾驶车辆的未来?

自动导引车案例

作者:Alix Paultre, Embedded Computing Design 在工厂自动化、仓库配货以及其他物料运输环境中正在采用自动导引车 (AG...
发表于 07-16 07:14 323次 阅读
自动导引车案例

苹果造车——新专利让“停车即充电”成为可能

本周四,苹果公布了一项关于自动驾驶汽车的无线充电系统的专利申请,这再一次显示了苹果在自动驾驶汽车上的....
的头像 无线充电研究院 发表于 07-15 15:10 453次 阅读
苹果造车——新专利让“停车即充电”成为可能

计算机视觉的三生三世

7 月 12 日-7 月 14 日,2019 第四届全球人工智能与机器人峰会(CCF-GAIR 20....
的头像 机器视觉检测 发表于 07-15 08:50 215次 阅读
计算机视觉的三生三世

巨头抱团,自动驾驶行业已呈三足鼎立之势

继宝马与戴姆勒联盟,通用和本田联盟之后,大众和福特正式结盟!
的头像 地平线HorizonRobotics 发表于 07-15 08:35 416次 阅读
巨头抱团,自动驾驶行业已呈三足鼎立之势

基于现场试验的自动驾驶汽车接受度研究

自动驾驶技术已经成为汽车产业发展的战略方向。
的头像 智车科技 发表于 07-14 12:25 481次 阅读
基于现场试验的自动驾驶汽车接受度研究

自动驾驶中的决策规划算法概述

本文将分别介绍各层的主要作用与常见算法,并且比较各种算法的优劣性及适用情景。
的头像 智车科技 发表于 07-14 12:23 583次 阅读
自动驾驶中的决策规划算法概述

能不能用GAN破解标注数据不足的问题呢

在计算机视觉领域,深度学习方法已全方位在各个方向获得突破,这从近几年CVPR 的论文即可看出。但这往....
的头像 AI科技大本营 发表于 07-14 11:58 212次 阅读
能不能用GAN破解标注数据不足的问题呢

丰田成立了一家合资企业 生产自动驾驶汽车芯片

汽车制造商现在是芯片制造商。 丰田正在进入半导体业务,与汽车供应商Denso合作组建一家专注于芯片制....
的头像 刘伟DE 发表于 07-14 01:23 1621次 阅读
丰田成立了一家合资企业 生产自动驾驶汽车芯片

自动驾驶L2的战况如何

“智能驾驶”是汽车智能化的一个重要维度,尤其是进入 2019 年,上至百万级,下至十几万,越来越多的....
发表于 07-13 11:55 287次 阅读
自动驾驶L2的战况如何

特斯拉解决全自动驾驶技术后就涨价

据electrek报道,马斯克近日在Twitter上表示,一旦自动驾驶机器人出租车成为可能,特斯拉很....
发表于 07-13 11:45 280次 阅读
特斯拉解决全自动驾驶技术后就涨价

端到端的自动驾驶研发系统介绍

Nvidia是比较早做端到端控制车辆工作的公司,其方法训练CNN模型完成从单个前向摄像头的图像像素到....
的头像 AI科技大本营 发表于 07-13 09:30 401次 阅读
端到端的自动驾驶研发系统介绍

百度自动驾驶新进展:发布了Apollo的最新版本 Apollo 5.0

此外,车辆需要 100% 通过 102 项场景覆盖度测试,比 T3 级别测试增加了 19 项高难度的....
的头像 AI科技大本营 发表于 07-13 08:23 289次 阅读
百度自动驾驶新进展:发布了Apollo的最新版本 Apollo 5.0

2019年CVPR有哪些糟糕的论文?

此外,TA认为AI领域的论文风格过于单一,思想严重雷同。最后,TA还批评了AI领域一个很不好的现象,....
的头像 新智元 发表于 07-13 08:06 363次 阅读
2019年CVPR有哪些糟糕的论文?

Waymo对外公布其自动驾驶最新里程碑

模拟自动驾驶测试总里程已经达到100亿英里!
的头像 机器人技术与应用 发表于 07-12 17:36 366次 阅读
Waymo对外公布其自动驾驶最新里程碑

今年下半年,视频监控有什么可以期待的

如果问起2019年下半年视频监控会有哪些新的变化值得我们期待,不少人便会提到人工智能或者机器学习,或....
的头像 安全自动化 发表于 07-12 17:33 352次 阅读
今年下半年,视频监控有什么可以期待的

中国第一家自动驾驶独角兽 完全的自主泊车

这不是头一个自主泊车方案。但这是第一个无人驾驶技术、hold住最难场景,真正可量产成本的方案。意义还....
发表于 07-12 15:37 716次 阅读
中国第一家自动驾驶独角兽 完全的自主泊车

经历曲折之路迈向自动驾驶未来

今天,当我们看到汽车制造商和自动驾驶科技公司结成各种联盟的时候,不禁思考,结盟的背后有何重要意义?联....
发表于 07-12 15:33 183次 阅读
经历曲折之路迈向自动驾驶未来

宾利推出电动概念车EXP100GT 引领自动驾驶未来

英国品牌宾利汽车(BENTLEY)今年正逢建厂100周年,精彩作品不断,上月曾推出全新Flying ....
发表于 07-12 15:30 198次 阅读
宾利推出电动概念车EXP100GT 引领自动驾驶未来

自然语言处理——人工智能连接主义复兴浪潮中的下一个突破口

AI 行业应用是一片新的大陆,深度学习作为新大陆的基石,经历了一轮又一轮突破。
的头像 宽禁带半导体技术创新联盟 发表于 07-12 15:21 351次 阅读
自然语言处理——人工智能连接主义复兴浪潮中的下一个突破口

城市更新下的基于5G和车路协同的自动驾驶

当书面的推演过程遇到现实的落地深耕,商业模式的问题开始提醒所有利益相关方实践的复杂和曲折。
的头像 深圳市汽车电子行业协会 发表于 07-12 15:18 241次 阅读
城市更新下的基于5G和车路协同的自动驾驶

中国人工智能行业光环渐褪

本月早些时候,一名男子把一瓶矿泉水浇到百度(Baidu)创始人兼首席执行官李彦宏(Robin Li)....
的头像 1号机器人网 发表于 07-12 14:11 562次 阅读
中国人工智能行业光环渐褪

实现自动驾驶宏图需着眼于当前机遇

尽管有很多人都在力推全自动驾驶车辆,但另一个趋势是可用的SAE 4级和5级的服务数量正在显著下降。
的头像 CEVA 发表于 07-12 11:52 492次 阅读
实现自动驾驶宏图需着眼于当前机遇

自动驾驶未来何在

无论是生存还是消亡,资本在这其中都发挥着巨大作用。
发表于 07-12 11:44 232次 阅读
 自动驾驶未来何在

自动驾驶没有寒冬,“渐进式”路线已成主旋律

本次会议围绕智能汽车产业的发展趋势,技术研发、行业求索、未来展望、智能汽车技术商业化落地等热点话题共....
的头像 智车科技 发表于 07-12 11:28 463次 阅读
自动驾驶没有寒冬,“渐进式”路线已成主旋律

自动驾驶和人工驾驶将并行走多久

只有当自动驾驶技术和商业应用市场投缘才能擦出火花,完成孵化期的‘惊险一跃’,又随着应用场景落地的深化....
发表于 07-12 08:51 209次 阅读
自动驾驶和人工驾驶将并行走多久

特斯拉可以自动上下高速啦

汽车的普及彰显着国力的强盛,在5G高速发展的今天,汽车芯片也将面临大换血。
的头像 芯媒介 发表于 07-12 08:49 352次 阅读
特斯拉可以自动上下高速啦

实现全自动驾驶尚需要众多技术革新之一智能网联汽车介绍

汽车行业的全自动驾驶技术,已经取得了突飞猛进的进展。 仅从日本市场看,在新车中,不仅高级轿车甚至连普通轿车和微型轿车均...
发表于 07-12 04:20 332次 阅读
实现全自动驾驶尚需要众多技术革新之一智能网联汽车介绍

特斯拉将打造自动驾驶机器人出租车

马斯克最近一直在谈论特斯拉网络(Tesla Network),这是该公司“总体计划”的一部分。
的头像 润欣科技Fortune 发表于 07-11 16:54 303次 阅读
特斯拉将打造自动驾驶机器人出租车

ADAS与自动驾驶汽车仿真你必须要知道这些

高级驾驶员辅助系统(ADAS)与自动驾驶汽车的研发不仅极富挑战,且无先例可循。此技术的实现需传感器技....
的头像 智车科技 发表于 07-11 15:32 339次 阅读
ADAS与自动驾驶汽车仿真你必须要知道这些

依靠“鸿蒙”再下一城 华为的自动驾驶野心有多大?

此前据外媒报道,华为近期似乎正在全球范围内招募内测人员,在Mate 30上测试鸿蒙操作系统,并可能将....
的头像 智车科技 发表于 07-11 15:30 439次 阅读
依靠“鸿蒙”再下一城 华为的自动驾驶野心有多大?

从5G试点到城市更新 自动驾驶的中国商业模式

基于5G和车路协同的自动驾驶由三个部分组成,首先需要有具有自动驾驶功能的汽车,其次需要有搭载智能设备....
的头像 智车科技 发表于 07-11 15:26 281次 阅读
从5G试点到城市更新 自动驾驶的中国商业模式

自动驾驶系统验证需要考虑的因素

确保自动驾驶车辆在其预期的运行环境中充分发挥作用是整个系统验证的关键部分。传统的软件验证包括需求和系....
的头像 智车科技 发表于 07-11 15:22 228次 阅读
自动驾驶系统验证需要考虑的因素

一种基于FPGA的实时视频图像处理算法研究与实现

摘要  为有效提高视频监控应用领域中多屏幕画面显示的清晰度、分辨度等问题,提出了一种基于FPGA的实时视频图像处...
发表于 06-28 07:06 381次 阅读
一种基于FPGA的实时视频图像处理算法研究与实现

全新毫米波传感器在汽车和工业领域的应用

世界瞬息万变,无论是道路、楼宇还是我们所生活的城市,这种高速的变幻可见一斑。 全新的高精度单芯片毫米波(mmWave)传感器...
发表于 06-25 05:00 99次 阅读
全新毫米波传感器在汽车和工业领域的应用

物联网和自动驾驶汽车

物联网的崛起伴随着自动驾驶汽车的所有承诺,智能手表可以完成从追踪心跳到充当信用卡的所有事情,以及可以通过智能手机在世...
发表于 06-20 04:20 94次 阅读
物联网和自动驾驶汽车

有没有关于SC块工作的视频?

有没有关于SC块工作的视频? 以上来自于百度翻译      以下为原文    Is there any...
发表于 05-31 14:26 80次 阅读
有没有关于SC块工作的视频?

2019年ADAS与自动驾驶市场蓝皮书

发表于 05-29 23:07 232次 阅读
2019年ADAS与自动驾驶市场蓝皮书

Uber无人车致命车祸的原因是什么

Uber无人车撞死人原因:软件发现了受害者但选择忽略...
发表于 05-28 09:26 110次 阅读
Uber无人车致命车祸的原因是什么

如何让自动驾驶更加安全?

最近,国内多个城市开始发放自动驾驶的开放道路测试牌照,意味着自动驾驶的汽车可以在公共道路上进行测试。不过,驾驶安全性仍是...
发表于 05-13 00:26 137次 阅读
如何让自动驾驶更加安全?