接触感知的人体运动预测
计算机视觉与模式识别
2022-10-11 v1
摘要
在本文中，我们解决场景感知的 3D 人体运动预测任务，该任务包括给定 3D 场景和过去人体运动来预测未来人体姿态。该任务的一个关键挑战是确保人与场景之间的一致性，考虑人与场景的交互。先前尝试仅隐式地建模此类交互，因此由于缺乏局部姿态与全局运动之间的显式约束，往往产生“幽灵运动”等伪影。相比之下，这里我们提出显式建模人与场景的接触。为此，我们引入基于距离的接触图，捕获每个时刻每个关节与每个 3D 场景点之间的接触关系。然后我们开发了一个两阶段流程：首先根据过去的接触图和场景点云预测未来接触图，然后通过以预测接触图为条件来预测未来人体姿态。在训练期间，我们利用由接触图和未来姿态定义的先验，显式鼓励全局运动与局部姿态之间的一致性。我们的方法在合成和真实数据集上都优于最先进的人体运动预测和人体合成方法。我们的代码可在 https://github.com/wei-mao-2019/ContAwareMotionPred 获取。
引用
@article{arxiv.2210.03954,
title = {Contact-aware Human Motion Forecasting},
author = {Wei Mao and Miaomiao Liu and Richard Hartley and Mathieu Salzmann},
journal= {arXiv preprint arXiv:2210.03954},
year = {2022}
}
备注
Accepted to NeurIPS2022