中文

3D 人体恢复中基于层次语义图的高斯控制

计算机视觉与模式识别 2024-06-25 v3

摘要

尽管 3D Gaussian Splatting(3DGS)近期在 3D 人体重建方面取得了进展,但它主要依赖 2D 像素级监督,忽略了不同身体部位的几何复杂性和拓扑关系。为了解决这一问题,我们引入了层次图人体高斯控制(HUGS)框架,以实现高保真 3D 人体重建。我们的方法利用身体部位的显式语义先验来确保几何拓扑的一致性,从而能够捕获身体部位之间复杂的几何和拓扑关联。此外,我们将高频特征从全局人体特征中解耦,以细化身体部位的表面细节。大量实验表明,我们的方法在人体重建中表现出优越的性能,特别是在增强表面细节和准确重建身体部位连接处方面。代码可在 https://wanghongsheng01.github.io/HUGS/ 获取。

关键词

引用

@article{arxiv.2405.12477,
  title  = {Gaussian Control with Hierarchical Semantic Graphs in 3D Human Recovery},
  author = {Hongsheng Wang and Weiyue Zhang and Sihao Liu and Xinrui Zhou and Jing Li and Zhanyun Tang and Shengyu Zhang and Fei Wu and Feng Lin},
  journal= {arXiv preprint arXiv:2405.12477},
  year   = {2024}
}