按意图交互：意图驱动的人-物交互检测
计算机视觉与模式识别
2019-09-24 v2
摘要
实例级检测任务的最新进展为真正理解视觉场景奠定了坚实基础。然而，充分理解社交场景的能力仍处于初步阶段。本工作中，我们聚焦于社交场景图像中的人-物交互（HOIs）检测，该任务在研究中具有挑战性且对实际应用日益有用。为执行与物体交互的社交任务，人类基于其意图引导注意力并移动身体。基于该观察，我们提供一种独特的计算视角来探索 HOI 检测中的人类意图。具体而言，所提人类意图驱动的 HOI 检测（iHOI）框架以身体关节到物体实例的相对距离建模人体姿态。其还利用人眼注视在弱监督设定下引导被关注的上下文区域。此外，我们提出难负样本采样策略以解决错误分组问题。我们在两个基准数据集 V-COCO 与 HICO-DET 上进行了充分实验。所提各组件的有效性亦得到验证。
引用
@article{arxiv.1808.09796,
title = {Interact as You Intend: Intention-Driven Human-Object Interaction Detection},
author = {Bingjie Xu and Junnan Li and Yongkang Wong and Mohan S. Kankanhalli and Qi Zhao},
journal= {arXiv preprint arXiv:1808.09796},
year = {2019}
}