何人于何时何地做了何事:多人同步跟踪与活动识别
计算机视觉与模式识别
2018-07-04 v1
摘要
我们提出了一种自举框架,用于在个体、交互与社群群体活动层面同时改进多人跟踪与活动识别。在给定观测到的行人检测结果的前提下,该推断过程包括识别所有行人参与者的轨迹、个体活动、成对交互以及集体活动。我们的方法使用图模型通过多阶段来表示并求解联合跟踪与识别问题:(1) 活动感知跟踪,(2) 联合交互识别与遮挡恢复,以及 (3) 集体活动识别。我们通过视觉跟踪解决“何地”与“何时”问题,并通过识别解决“何人”与“何事”问题。可见与遮挡个体、成对交互、群体及活动之间的高阶关联随后在贝叶斯框架内使用超图形式化方法求解。在多个基准上的实验表明了我们的方法相对于最先进方法的优势。
引用
@article{arxiv.1807.01253,
title = {Who did What at Where and When: Simultaneous Multi-Person Tracking and Activity Recognition},
author = {Wenbo Li and Ming-Ching Chang and Siwei Lyu},
journal= {arXiv preprint arXiv:1807.01253},
year = {2018}
}