一种统一的多视角多人跟踪框架
计算机视觉与模式识别
2023-02-09 v1 人工智能
摘要
尽管三维多视角多人跟踪（3D MM-Tracking）取得了显著进展，当前的3D MM-Tracking框架分别针对足迹跟踪与姿态跟踪设计。具体而言，为足迹跟踪设计的框架无法用于3D姿态跟踪，因为它们通过单应性投影直接在地面平面上获取三维位置，这不适用于地面以上的三维姿态。相反，为姿态跟踪设计的框架通常割裂多视角与多帧关联，且对足迹跟踪可能不够鲁棒，因为足迹跟踪使用的关健点少于姿态跟踪，削弱了单帧中的多视角关联线索。本研究提出一种统一的多视角多人跟踪框架，以弥合足迹跟踪与姿态跟踪之间的鸿沟。无需额外修改，该框架可采用单目2D边界框与2D姿态作为输入，为多人生成鲁棒的三维轨迹。重要的是，多帧与多视角信息被联合用于提升关联与三角化的性能。我们的框架在Campus与Shelf数据集上取得3D姿态跟踪的SOTA性能，并在WILDTRACK与MMPTRACK数据集上取得与3D足迹跟踪相当的結果，从而验证了其有效性。
引用
@article{arxiv.2302.03820,
title = {A Unified Multi-view Multi-person Tracking Framework},
author = {Fan Yang and Shigeyuki Odashima and Sosuke Yamao and Hiroaki Fujimoto and Shoichi Masui and Shan Jiang},
journal= {arXiv preprint arXiv:2302.03820},
year = {2023}
}
备注
Accepted to Computational Visual Media