中文

仅从二维姿态出发的无监督多人三维人体姿态估计

计算机视觉与模式识别 2024-03-13 v3

摘要

当前无监督的二维到三维人体姿态估计(HPE)方法由于单目图像中的透视歧义而无法应用于多人场景。因此,我们提出了首批研究之一,探讨仅从二维姿态出发进行无监督多人二维到三维 HPE 的可行性,重点在于重建人体交互。为解决透视歧义问题,我们在先前工作的基础上预测相机相对于受试者骨盆的仰角。这使我们能够将预测的姿态旋转至与地面平面齐平,同时获得个体间在三维中的垂直偏移估计。我们的方法先将每个受试者的二维姿态独立提升为三维,再将其组合于共享的三维坐标系中。随后这些姿态按预测的仰角进行旋转和偏移,再进行缩放。仅此即可让我们获得其姿态的准确三维重建。我们在 CHI3D 数据集上展示了结果,引入该数据集用于无监督二维到三维姿态估计,并提出三种新的量化指标,为未来研究建立基准。

关键词

引用

@article{arxiv.2309.14865,
  title  = {Unsupervised Multi-Person 3D Human Pose Estimation From 2D Poses Alone},
  author = {Peter Hardy and Hansung Kim},
  journal= {arXiv preprint arXiv:2309.14865},
  year   = {2024}
}