基于活动专属特征与活动关联的多标签活动识别
计算机视觉与模式识别
2021-03-08 v2
摘要
多标签活动识别旨在识别每个视频中同时或顺序执行的多个活动。近期大多数活动识别网络聚焦于单活动,即假设每个视频中仅有一个活动。这些网络为所有活动提取共享特征,并非为多标签活动而设计。我们提出了一种多标签活动识别方法,为每个活动提取独立的特征描述子并学习活动间的关联。该结构可端到端训练,并能嵌入任意现有的视频分类网络结构中。我们的方法在四个多标签活动识别数据集上优于当前最优(state-of-the-art)方法。为了更好地理解系统生成的活动专属特征,我们在 Charades 数据集上对这些活动专属特征进行了可视化。
引用
@article{arxiv.2009.07420,
title = {Multi-Label Activity Recognition using Activity-specific Features and Activity Correlations},
author = {Yanyi Zhang and Xinyu Li and Ivan Marsic},
journal= {arXiv preprint arXiv:2009.07420},
year = {2021}
}