LiDARCap:基于 LiDAR 点云的长距离无标记 3D 人体动作捕捉
计算机视觉与模式识别
2022-03-29 v1
摘要
现有的动作捕捉数据集大多为短距离,尚无法满足长距离应用的需求。我们提出 LiDARHuman26M,一种由 LiDAR 在更长距离下采集的新人体动作捕捉数据集以克服该限制。我们的数据集还包含由 IMU 系统获取的真值人体动作以及同步 RGB 图像。我们进一步提出一种强基线方法 LiDARCap,用于 LiDAR 点云人体动作捕捉。具体而言,我们首先利用 PointNet++ 编码点的特征,然后采用逆运动学求解器与 SMPL 优化器,通过分层聚合时间编码特征来回归姿态。定量与定性实验表明,我们的方法优于仅基于 RGB 图像的技术。消融实验证明我们的数据集具有挑战性且值得进一步研究。最后,在 KITTI Dataset 与 Waymo Open Dataset 上的实验表明,我们的方法可泛化至不同的 LiDAR 传感器设置。
引用
@article{arxiv.2203.14698,
title = {LiDARCap: Long-range Marker-less 3D Human Motion Capture with LiDAR Point Clouds},
author = {Jialian Li and Jingyi Zhang and Zhiyong Wang and Siqi Shen and Chenglu Wen and Yuexin Ma and Lan Xu and Jingyi Yu and Cheng Wang},
journal= {arXiv preprint arXiv:2203.14698},
year = {2022}
}