SimulCap：基于布料模拟的单视角人体性能捕捉
计算机视觉与模式识别
2019-03-19 v2
摘要
本文提出了一种使用单个RGBD相机进行具有动态细节（如衣物褶皱）的实时自由视角人体性能捕捉的新方法。我们的主要贡献是：（i）衣物与身体的多层表示，以及（ii）基于物理的性能捕捉流程。我们首先使用多层表面表示对表演者进行数字化，该表示包括未着衣的身体表面和分离的服装网格。对于性能捕捉，我们对输入帧依次进行骨架跟踪、布料模拟和迭代深度拟合。通过将布料模拟纳入性能捕捉流程，即使在遮挡区域我们也能模拟出合理的布料动力学与布料-身体交互，这是以往捕捉方法无法做到的。此外，通过将深度拟合表述为一个物理过程，我们的系统在保持物理约束的同时，产生与深度观测一致的布料跟踪结果。结果与评估显示了我们方法的有效性。我们的方法还支持诸如布料重定向、自由视角视频渲染和动画等新型应用。
引用
@article{arxiv.1903.06323,
title = {SimulCap : Single-View Human Performance Capture with Cloth Simulation},
author = {Tao Yu and Zerong Zheng and Yuan Zhong and Jianhui Zhao and Qionghai Dai and Gerard Pons-Moll and Yebin Liu},
journal= {arXiv preprint arXiv:1903.06323},
year = {2019}
}
备注
CVPR 2019