目标检测中的幻觉现象——一项视觉部件验证研究
计算机视觉与模式识别
2021-06-07 v1 人工智能
机器学习
摘要
我们表明目标检测器可能产生幻觉并检测出缺失的物体;甚至可能在其预期但不存在的位置被准确地定位。这对于依赖视觉部件验证的应用尤为成问题:检测物体部件是否存在。我们展示了流行的目标检测器如何在视觉部件验证任务中产生物体幻觉,并引入了首个视觉部件验证数据集:DelftBikes,其包含 10,000 张自行车照片,每张图像有 22 个密集标注的部件,其中某些部件可能缺失。我们为每个部件显式标注了额外的物体状态标签,以反映部件是缺失还是完好。我们提议通过依赖召回率来评估视觉部件验证,并在 DelftBikes 上比较流行的目标检测器。
引用
@article{arxiv.2106.02523,
title = {Hallucination In Object Detection -- A Study In Visual Part Verification},
author = {Osman Semih Kayhan and Bart Vredebregt and Jan C. van Gemert},
journal= {arXiv preprint arXiv:2106.02523},
year = {2021}
}
备注
ICIP 2021