诊断人-物交互检测中的稀有性
计算机视觉与模式识别
2020-06-11 v1
摘要
人-物交互(HOI)检测是计算机视觉中的核心任务。其目标是定位所有人与物对并识别其交互。由<动词,名词>元组定义的交互导致了长尾视觉识别挑战,因为许多组合极少出现。所提出模型的性能尤其受限于尾部类别,但鲜有工作去理解其原因。为此,本文提出诊断HOI检测中的稀有性。我们提出一种三步策略,即检测、辨识与识别,通过研究最先进模型仔细分析限制因素。我们的发现表明检测与辨识步骤受遮挡与相对位置等交互信号影响,进而限制了识别精度。
引用
@article{arxiv.2006.05728,
title = {Diagnosing Rarity in Human-Object Interaction Detection},
author = {Mert Kilickaya and Arnold Smeulders},
journal= {arXiv preprint arXiv:2006.05728},
year = {2020}
}
备注
Accepted at CVPR'20 Workshop on Learning from Limited Labels