码迷,mamicode.com
首页 > 其他好文 > 详细

Acquistion Location Confidence for accurate object detection

时间:2019-01-18 10:53:44      阅读:207      评论:0      收藏:0      [点我收藏+]

标签:测试的   区别   虚线   mask   strong   类别   最大的   一点   justify   

 

 

Acquistion Location Confidence for accurate object detection

本论文主要是解决一下两个问题:

1、分类得分高的预测框与IOU不匹配,(我猜应该是训练数据集导致的)

2、基于回归的边框修正是非单调的,缺乏可解释性。

 

贡献点

  1. IoU-guided NMS
  2. Optimization refine
  3. PRpooling

1IoU-guided NMS

 技术分享图片

 

1)传统 NMS :  根据边界框的分类置信度排序,每次选择cls score最大的框,并对与它IoU大于阈值的框抑制。定位准确的边界框中有很大一部分会被错误抑制,这是由分类置信度和定位准确度之间的不匹配造成的,

2IoU-NMS : 使用预测得到的IoU来对预测框进行排序,每次选择IoU最大的框并对与它IoU大于一定阈值的框抑制。

3soft-NMSNMS基础上,IoU 大于阈值的框不将其分类置信度置为0

 

为了使用IoU来指导排序,但在在测试的时候没有GroundTruth信息,于是设计一个网络来

估计边框与GroundTruthIoU。如下图所示。

 技术分享图片

 

虚线框的是IoU-Net

输入:Jittered-RoIs:通过对groundtruth 随机变换得到一系列的候选框(而不采用RPN输出的RoIs

损失:smooth-L1 LOSS

输出:候选框与GroundTruthIoU交并比(用于后续的IoU-guided NMS和优化修正算法)

 

2、提出的PrPooling代替了原来的RoI pooling

 技术分享图片

 

因为RPN网络输出的bounding box的坐标是浮点数,

  1. RoI Pooling:有量化误差
  2. RoI Align:不用量化,利用双线性插值计算出对应点的特征值。 但N=4固定,ROI大小不固定。
  3. PrRoI Pooling:利用双线性插值计算出对应点的特征值,该函数连续可导,有益于后续的基于优化的边框修正。

 技术分享图片

 

 

论文中的不足之处,缺少PrRoI-pooling的对照实验。在Mask-RCNN中的RoIAlign的精度相对于RoIPool明显提高。

 

The code is released at: https://github.com/vacancy/PreciseRoIPooling

 

3、基于优化的边框修正

 技术分享图片

 

问题:

基于回归的边界框精修非单调,对输入的分布变化敏感,不同的预测框迭代次数没法自适应。

解决方法:

通过每次修正得到的边界框预测得到IoU来修正。

基于优化的算法部分:

每次迭代对不同的预测框都做一次修正,因为PrRoI-Pool是连续可导的,所以通过梯度上升的方式进行优化,计算出边界框的变换。当变换后的边界框送入IoU-Net得到新的IoU与旧的IoU区别小于一定值或者出现退化,该边界框就不在修正。

 

 技术分享图片

 

 

基于回归的方法:如图第一排随着迭代次数的增加,红色的预测越来越偏离GroundTruth

基于优化的方法:如图第二排随着迭代次数增加,预测框越来越精确。

4、实验细节

1)数据集:

80类别的MS-COCO 80k张训练图像和35k张验证图像,5k张验证图像做测试。

2)训练参数设置:

输入图像裁剪为1200*800的大小

IoU-Net的训练数据是另外产生的。对于IoU-NetIoU标签通过正则化变为【-11】之间。

每层的参数设置为mean=0,标准差=0.010.001的高斯分布,batchsize大小为16,在推理部分,先还是使用了一次边框回归来初始化坐标,为了加快推理,对所有检测框做IoU -NMS100个最大分类置信度的边框再使用基于优化的算法进行微调。

 

5、实验结果比较

 技术分享图片

 

相比于soft-NMS,采用了IoU-NMS的结果在AP90上明显提高了。

 技术分享图片

 

问题:AP50的结果较差。

问题原因:因为较小的IoU的框与GroundTruth的特征差异大,导致了IoU预测器不精确,修正也退化了。

解决方法:通过采集更多小IoU的来训练就可以解决

 技术分享图片

 

 

IoU-Net相较于FPNMask-RCNN速度下降了一点,但精度有所提升,时间耗费应该主要是在基于优化的边框修正上

Acquistion Location Confidence for accurate object detection

标签:测试的   区别   虚线   mask   strong   类别   最大的   一点   justify   

原文地址:https://www.cnblogs.com/SuperLab/p/10286298.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!