POSEFusion:用于单视角人体体积捕捉的位姿引导选择性融合
计算机视觉与模式识别
2021-03-30 v1
摘要
我们提出 POse-guided SElective Fusion(POSEFusion),一种单视角人体体积捕捉方法,利用基于跟踪的方法和无跟踪推断来实现高保真且动态的 3D 重建。通过提出一种包含位姿引导关键帧选择和鲁棒隐式表面融合的新颖重建框架,我们的方法充分利用了基于跟踪的方法和无跟踪推断方法的优势,最终实现了即使在不可见区域也能对动态表面细节进行高保真重建。我们将关键帧选择表述为动态规划问题,以保证重建序列的时间连续性。此外,新颖的鲁棒隐式表面融合包含自适应混合权重以保留高保真表面细节,以及一种自动碰撞处理方法来应对潜在的自身碰撞。总体而言,我们的方法能从单个 RGBD 相机实现可见与不可见区域的高保真动态捕捉,结果和实验表明我们的方法优于当前最优方法。
引用
@article{arxiv.2103.15331,
title = {POSEFusion: Pose-guided Selective Fusion for Single-view Human Volumetric Capture},
author = {Zhe Li and Tao Yu and Zerong Zheng and Kaiwen Guo and Yebin Liu},
journal= {arXiv preprint arXiv:2103.15331},
year = {2021}
}
备注
CVPR 2021 (Oral presentation), for more information, please refer to the projectpage http://www.liuyebin.com/posefusion/posefusion.html