中文

UnionDet:面向实时人机交互检测的联合级检测器

计算机视觉与模式识别 2023-12-21 v1

摘要

深度神经网络的最新进展在从图像中检测单个物体方面取得了显著进步。然而,仅靠物体检测不足以完全理解视觉场景。为了实现更深层的视觉理解,物体之间的交互作用,尤其是人与物体之间的交互至关重要。大多数先前的工作通过自底向上的方法获取此类信息,即先检测物体,然后通过配对物体 sequentially 预测交互作用。这成为了人机交互(HOI)检测推理时间的主要瓶颈。为解决这一问题,我们提出了 UnionDet,这是一种由新型联合级检测器驱动的 HOI 检测单阶段元架构,通过直接捕捉交互区域消除了额外的推理阶段。我们的人机交互单阶段检测器在两个公共数据集(V-COCO 和 HICO-DET)上超越了最先进的方法,同时将交互预测时间显著减少了 4 至 14 倍。

关键词

引用

@article{arxiv.2312.12664,
  title  = {UnionDet: Union-Level Detector Towards Real-Time Human-Object Interaction Detection},
  author = {Bumsoo Kim and Taeho Choi and Jaewoo Kang and Hyunwoo J. Kim},
  journal= {arXiv preprint arXiv:2312.12664},
  year   = {2023}
}

备注

ECCV 2020