中文

PAMI-AD:一种在监控视频中利用部位注意力与运动信息的活动检测器

计算机视觉与模式识别 2022-05-10 v2

摘要

监控视频中的活动检测是一项具有挑战性的任务,其难点源于小目标、复杂的活动类别、未剪辑特性等。现有方法通常受限于不准确的提议、较差的分类器或不足的后处理方法而性能有限。本工作中,我们提出一种在未经剪辑的监控视频中针对以人为中心和以车为中心的活动的全面且有效的活动检测系统。其由四个模块组成,即目标定位器、提议过滤器、活动分类器和活动精炼器。对于以人为中心的活动,提出一种新颖的部位注意力机制以探索不同身体部位的细节特征。对于以车为中心的活动,我们提出一种定位掩码方法联合编码运动与前景注意力特征。我们在大规模活动检测数据集VIRAT上进行实验,并在两类活动上均取得最佳结果。此外,我们的团队在TRECVID 2021 ActEV挑战赛中荣获第一名。

关键词

引用

@article{arxiv.2203.03796,
  title  = {PAMI-AD: An Activity Detector Exploiting Part-attention and Motion Information in Surveillance Videos},
  author = {Yunhao Du and Zhihang Tong and Junfeng Wan and Binyu Zhang and Yanyun Zhao},
  journal= {arXiv preprint arXiv:2203.03796},
  year   = {2022}
}

备注

ICME 2022 Workshop