包括关节旋转的高效 2D 到全 3D 人体姿态提升
计算机视觉与模式识别
2025-04-15 v1
摘要
在体育分析中，准确捕捉身体关节的 3D 位置和旋转对于理解运动员的生物力学至关重要。虽然人体网格恢复 (HMR) 模型可以估计关节旋转，但通常在关节定位方面表现不如 3D 人体姿态估计 (HPE) 模型。最近的工作通过将 3D HPE 模型与逆向运动学 (IK) 结合来估计关节位置和旋转，以克服这一限制。然而，IK 计算昂贵。为克服这一问题，我们提出了一种 novel 2D 到 3D 提升模型，直接在单次前向传递中估计包括关节旋转的 3D 人体姿态。我们研究了多种旋转表示、损失函数和训练策略——无论是否使用真实旋转。我们的模型在旋转估计方面实现了最新进展的准确性，速度是基于 IK 的方法的 150 倍，在关节定位精度方面超越了 HMR 模型。
引用
@article{arxiv.2504.09953,
title = {Efficient 2D to Full 3D Human Pose Uplifting including Joint Rotations},
author = {Katja Ludwig and Yuliia Oksymets and Robin Schön and Daniel Kienzle and Rainer Lienhart},
journal= {arXiv preprint arXiv:2504.09953},
year = {2025}
}
备注
accepted at CVSports@CVPR'25