标签:测试的 区别 虚线 mask strong 类别 最大的 一点 justify
本论文主要是解决一下两个问题:
1、分类得分高的预测框与IOU不匹配,(我猜应该是训练数据集导致的)
2、基于回归的边框修正是非单调的,缺乏可解释性。
贡献点
(1)传统 NMS : 根据边界框的分类置信度排序,每次选择cls score最大的框,并对与它IoU大于阈值的框抑制。定位准确的边界框中有很大一部分会被错误抑制,这是由分类置信度和定位准确度之间的不匹配造成的,
(2)IoU-NMS : 使用预测得到的IoU来对预测框进行排序,每次选择IoU最大的框并对与它IoU大于一定阈值的框抑制。
(3)soft-NMS:NMS基础上,IoU 大于阈值的框不将其分类置信度置为0。
为了使用IoU来指导排序,但在在测试的时候没有GroundTruth信息,于是设计一个网络来
估计边框与GroundTruth的IoU。如下图所示。
虚线框的是IoU-Net。
输入:Jittered-RoIs:通过对groundtruth 随机变换得到一系列的候选框(而不采用RPN输出的RoIs)
损失:smooth-L1 LOSS
输出:候选框与GroundTruth的IoU交并比(用于后续的IoU-guided NMS和优化修正算法)
因为RPN网络输出的bounding box的坐标是浮点数,
论文中的不足之处,缺少PrRoI-pooling的对照实验。在Mask-RCNN中的RoIAlign的精度相对于RoIPool明显提高。
The code is released at: https://github.com/vacancy/PreciseRoIPooling
问题:
基于回归的边界框精修非单调,对输入的分布变化敏感,不同的预测框迭代次数没法自适应。
解决方法:
通过每次修正得到的边界框预测得到IoU来修正。
基于优化的算法部分:
每次迭代对不同的预测框都做一次修正,因为PrRoI-Pool是连续可导的,所以通过梯度上升的方式进行优化,计算出边界框的变换。当变换后的边界框送入IoU-Net得到新的IoU与旧的IoU区别小于一定值或者出现退化,该边界框就不在修正。
基于回归的方法:如图第一排随着迭代次数的增加,红色的预测越来越偏离GroundTruth
基于优化的方法:如图第二排随着迭代次数增加,预测框越来越精确。
(1)数据集:
80类别的MS-COCO 80k张训练图像和35k张验证图像,5k张验证图像做测试。
(2)训练参数设置:
输入图像裁剪为1200*800的大小
IoU-Net的训练数据是另外产生的。对于IoU-Net的 IoU标签通过正则化变为【-1,1】之间。
每层的参数设置为mean=0,标准差=0.01或0.001的高斯分布,batchsize大小为16,在推理部分,先还是使用了一次边框回归来初始化坐标,为了加快推理,对所有检测框做IoU -NMS前100个最大分类置信度的边框再使用基于优化的算法进行微调。
相比于soft-NMS,采用了IoU-NMS的结果在AP90上明显提高了。
问题:AP50的结果较差。
问题原因:因为较小的IoU的框与GroundTruth的特征差异大,导致了IoU预测器不精确,修正也退化了。
解决方法:通过采集更多小IoU的来训练就可以解决
IoU-Net相较于FPN、Mask-RCNN速度下降了一点,但精度有所提升,时间耗费应该主要是在基于优化的边框修正上
Acquistion Location Confidence for accurate object detection
标签:测试的 区别 虚线 mask strong 类别 最大的 一点 justify
原文地址:https://www.cnblogs.com/SuperLab/p/10286298.html