电子发烧友App

硬声App

创作
电子发烧友网>电子资料下载>人工智能>目标检测的模型集成方法及实验

目标检测的模型集成方法及实验

2021-01-26 | pdf | 228.03KB | 次下载 | 免费

资料介绍

作者:Vikas S Shetty
编译:ronghuaiyang

导读

模型集成是一种提升模型能力的常用方法,但也会带来推理时间的增加,在物体检测上效果如何,可以看看。


介绍

集成机器学习模型是一种常见的提升模型能力的方式,并已在多个场景中使用,因为它们结合了多个模型的决策,以提高整体性能,但当涉及到基于DNN(深度神经网络)的目标检测模型时,它并不仅仅是合并结果那么简单。

集成的需求

为了在任何模型中获得良好的结果,都需要满足某些标准(数据、超参数)。但在真实场景中,你可能会得到糟糕的训练数据,或者很难找到合适的超参数。在这些情况下,综合多个性能较差的模型可以帮助你获得所需的结果。在某种意义上,集成学习可以被认为是一种通过执行大量额外计算来弥补学习算法不足的方法。另一方面,另一种选择是在一个非集成系统上做更多的学习。对于计算、存储或通信资源的相同增加,集成系统使用两种或两种以上的方法可能会比使用单一方法增加资源的方法更有效地提高整体精度。

看起来挺好,有没有缺点呢?

  • 更难调试或理解预测,因为预测框是根据多个模型绘制的。
  • 推理时间根据模型和使用的模型数量而增加。
  • 尝试不同的模型以获得合适的模型集合是一件耗时的事情。

不同的模型集成

  • OR方法:如果一个框是由至少一个模型生成的,就会考虑它。
  • AND方法:如果所有模型产生相同的框,则认为是一个框(如果IOU >0.5)。
  • 一致性方法:如果大多数模型产生相同的框,则认为是一个框,即如果有m个模型,(m/2 +1)个模型产生相同的框,则认为这个框有效。
  • 加权融合:这是一种替代NMS的新方法,并指出了其不足之处。

不同的集成方法

在上面的例子中,OR方法的预测得到了所有需要的对象框,但也得到了一个假阳性结果,一致性的方法漏掉了马,AND方法同时漏掉了马和狗。

验证

为了计算不同的集成方法,我们将跟踪以下参数:

  • True posiTIve:预测框与gt匹配
  • False PosiTIves:预测框是错误的
  • False NegaTIves:没有预测,但是存在gt。
  • Precision:度量你的预测有多准确。也就是说,你的预测正确的百分比[TP/ (TP + FP)]
  • Recall:度量gt被预测的百分比[TP/ (TP + FN)]
  • Average Precision:precision-recall图的曲线下面积

使用的模型

为了理解集成是如何起作用的,我们提供了用于实验的独立模型的结果。

1. YoloV3:


2. Faster R-CNN — ResNeXt 101 [X101-FPN]:


集成实验

1. OR — [YoloV3, X101-FPN]


如果你仔细观察,FPs的数量增加了,这反过来降低了精度。与此同时,TPs数量的增加反过来又增加了召回。这是使用OR方法时可以观察到的一般趋势。

2. AND — [YoloV3, X101-FPN]


与我们使用OR方法观察到的情况相反,在AND方法中,我们最终获得了较高的精度和较低的召回率,因为几乎所有的假阳性都被删除了,因为YoloV3和X101的大多数FPs是不同的。

检测框加权融合

在NMS方法中,如果框的IoU大于某个阈值,则认为框属于单个物体。因此,框的过滤过程取决于这个单一IoU阈值的选择,这影响了模型的性能。然而,设置这个阈值很棘手:如果有多个物体并排存在,那么其中一个就会被删除。NMS丢弃了冗余框,因此不能有效地从不同的模型中产生平均的局部预测。


NMS和WBF之间的主要区别是,WBF利用所有的框,而不是丢弃它们。在上面的例子中,红框是ground truth,蓝框是多个模型做出的预测。请注意,NMS是如何删除冗余框的,但WBF通过考虑所有预测框创建了一个全新的框(融合框)。

3. Weighted Boxes Fusion — [Yolov3, X101-FPN]


YoloV3和X101-FPN的权重比分别为2:1。我们也试着增加有利于X101-FPN的比重(因为它的性能更好),但在性能上没有看到任何显著的差异。从我们读过的加权融合论文中,作者注意到了AP的增加,但如你所见,WBF YoloV3和X101-FPN并不比OR方法好很多。我们注意到的是,大部分的实验涉及至少3个或更多模型。

4. Weighted Boxes Fusion — [Yolov3, X101, R101, R50]



在最后的实验中,我们使用了YoloV3以及我们在Detectron2中训练的3个模型[ResNeXt101-FPN, ResNet101-FPN, ResNet50-FPN]。显然,召回率有一个跳跃(约为传统方法的0.3),但AP的跳跃并不大。另外,需要注意的是,当你向WF方法添加更多模型时,误报的数量会激增。

总结

当使用相互补充的模型时,集成是提高性能的一种很好的方法,但它也会以速度为代价来完成推理。根据需求,可以决定有多少个模型,采用哪种方法,等等。但从我们进行的实验来看,性能提升的数量似乎与一起运行这些模型所需的资源和推断时间不成比例。

英文原文:https://medium.com/inspiredbrilliance/object-detecTIon-through-ensemble-of-models-fed015bc1ee0
本文转自:AI公园,作者:Vikas S Shetty,编译:ronghuaiyang,
转载此文目的在于传递更多信息,版权归原作者所有。

下载该资料的人也在下载 下载该资料的人还在阅读
更多 >

评论

查看更多

下载排行

本周

  1. 1常用的日常电路图汇总
  2. 3.48 MB  |  10次下载  |  1 积分
  3. 2常用驱动电路设计及应用pdf
  4. 29.48 MB  |  9次下载  |  1 积分
  5. 3W5500芯片数据手册
  6. 1.39 MB  |  5次下载  |  免费
  7. 4STM32开发板学习——USB、串口、JTAG、SWD下载的区别
  8. 0.12 MB  |  5次下载  |  免费
  9. 5电子基础篇5---三极管
  10. 0.15 MB  |  5次下载  |  免费
  11. 6HAL库结构
  12. 0.13 MB  |  4次下载  |  免费
  13. 7"CAN收发器SN65HVD230,实际应用案例分析"
  14. 1.30 MB  |  4次下载  |  免费
  15. 8基于单片机的多功能抢答器的设计与实现Proteus仿真资料包
  16. 1.21 MB  |  4次下载  |  免费

本月

  1. 151单片机之逻辑运算指令ANL、ORL、XRL等
  2. 93.18KB  |  76次下载  |  免费
  3. 2单片机程序加解密方法和注意事项
  4. 184.18KB  |  33次下载  |  免费
  5. 3macOS搭建51单片机开发环境
  6. 593.4KB  |  31次下载  |  免费
  7. 4第十二届蓝桥杯单片机省赛题目解析
  8. 642.49KB  |  31次下载  |  免费
  9. 551单片机中断的调用寄存器组(PSW)的作用,以及汇编堆栈的作用,堆栈指针的SP的使用方法,RAM的运行和ROM在单片机具体运行和C语言的优势和中断,定时器基础知识(上)
  10. 595.06KB  |  30次下载  |  免费
  11. 651/STC12单片机SCON,PCON,TMOD寄存器定义及功能
  12. 184.32KB  |  26次下载  |  免费
  13. 7STM32F407+ESP8266+SD卡进行远程固件升级
  14.   |  23次下载  |  免费
  15. 851单片机的定时器中断(数码管读秒+LED闪烁)
  16. 246.45KB  |  23次下载  |  免费

总榜

  1. 1matlab软件下载入口
  2. 未知  |  934817次下载  |  免费
  3. 2protel99se软件下载(可英文版转中文版)
  4. 78.1 MB  |  537325次下载  |  免费
  5. 3MATLAB 7.1 下载 (含软件介绍)
  6. 1331200  |  419803次下载  |  免费
  7. 4OrCAD10.5下载,OrCAD10.5中文版软件
  8. 817182  |  233671次下载  |  免费
  9. 5Altium DXP2002下载入口
  10. 未知  |  232860次下载  |  免费
  11. 6电路仿真软件multisim 10.0免费下载
  12. 340992  |  190859次下载  |  免费
  13. 7十天学会AVR单片机与C语言视频教程 下载
  14. 158M  |  183044次下载  |  免费
  15. 8proe5.0野火版下载(中文版免费下载)
  16. 818176  |  137848次下载  |  免费
版权所有 © 深圳华秋电子有限公司 电子发烧友电路图粤公网安备 44030402000349号 电信与信息服务业务经营许可证:粤B2-20160233 工商网监认证工商网监 粤ICP备14022951号