HISR:用于照片级真实 3D 人体重建的混合隐式曲面表示
计算机视觉与模式识别
2023-12-29 v1
摘要
神经重建与渲染策略因其能够保留高层形状细节而展现出最先进的性能。然而,现有方法要么将物体表示为隐式曲面函数,要么表示为神经体,且在恢复具有异质材料(特别是人体皮肤、头发或衣物)的形状方面仍存在困难。为此,我们提出了一种新的混合隐式曲面表示来建模人体形状。该表示由两个曲面层组成,分别代表着装人体上的不透明区域和半透明区域。我们利用视觉线索自动分割不同区域,并学习重建两个有向距离函数(SDF)。我们在不透明区域(如身体、面部、衣物)执行基于曲面的渲染以保留高保真表面法线,而在半透明区域(如头发)执行体渲染。实验表明,我们的方法在 3D 人体重建上获得了最先进的结果,并在其他物体上也展现了具有竞争力的性能。
引用
@article{arxiv.2312.17192,
title = {HISR: Hybrid Implicit Surface Representation for Photorealistic 3D Human Reconstruction},
author = {Angtian Wang and Yuanlu Xu and Nikolaos Sarafianos and Robert Maier and Edmond Boyer and Alan Yuille and Tony Tung},
journal= {arXiv preprint arXiv:2312.17192},
year = {2023}
}
备注
Accepted by AAAI 2024 main track