TexMesh:从 RGB-D 视频重建精细人体纹理与几何
计算机视觉与模式识别
2020-09-22 v3
摘要
我们提出 TexMesh,一种从 RGB-D 视频重建具有高分辨率全身纹理的精细人体网格的新方法。TexMesh 可实现高质量的人体自由视点渲染。给定 RGB 帧、捕获的环境贴图以及来自 RGB-D 跟踪的粗粒度逐帧人体网格,我们的方法重建出时空一致且精细的逐帧网格,以及高分辨率反照率纹理。利用入射光照,我们能够准确估计局部表面几何与反照率,从而使我们能够进一步使用光度约束以自监督方式将合成训练的模型适配到真实世界序列,用于精细表面几何和高分辨率纹理估计。实践中,我们在一短段示例序列上训练模型进行自适配,之后模型以交互帧率运行。我们在合成与真实数据上验证 TexMesh,并显示其在定量与定性上均优于当前最优方法。
引用
@article{arxiv.2008.00158,
title = {TexMesh: Reconstructing Detailed Human Texture and Geometry from RGB-D Video},
author = {Tiancheng Zhi and Christoph Lassner and Tony Tung and Carsten Stoll and Srinivasa G. Narasimhan and Minh Vo},
journal= {arXiv preprint arXiv:2008.00158},
year = {2020}
}
备注
ECCV 2020