基于平面扫描立体匹配的多视角多人三维姿态估计

现有的多视角多人三维姿态估计方法显式地建立跨视角对应关系，以将来自多个相机视角的二维姿态检测结果分组，并为每个人求解三维姿态估计。在多人物场景中建立跨视角对应关系具有挑战性，且不正确的对应关系会导致多阶段流程性能次优。本工作中，我们提出基于平面扫描立体匹配的多视角三维姿态估计方法，以一次性联合解决跨视角融合与三维姿态重建。具体而言，我们提出对目标相机视角中每个二维姿态的每个关节进行深度回归。跨视角一致性约束通过多个参考相机视角经平面扫描算法隐式施加，以促进准确的深度回归。我们采用由粗到精策略，先回归人物级深度，再进行逐人关节级相对深度估计。给定估计深度，通过简单反投影获得三维姿态。我们在基准数据集上评估了该方法，其优于以往最优方法且效率显著。我们的代码见 https://github.com/jiahaoLjh/PlaneSweepPose。