中文

GlossyGS:基于3D高斯溅写的光面对象逆渲染

计算机视觉与模式识别 2024-10-18 v1

摘要

从姿态图像重建对象是计算机图形和计算机视觉中的关键且复杂任务。虽然基于NeRF的神经重建方法显示出惊人的重建能力,但往往需要大量计算时间。最近的策略采用3D高斯溅写(3D-GS)进行逆渲染,产生了快速且有效的结果。然而,这些技术通常难以为光面对象产生可信的几何和材料,挑战源于逆渲染固有的歧义。为此,我们引入GlossyGS,一种创新的3D-GS基于逆渲染框架,旨在通过集成材料先验项精确重建光面对象的几何和材料。关键思想是使用微面几何分段先验,以减少固有的歧义并提高几何和材料的分解。此外,我们引入了法线图预滤波策略,以更准确地模拟反射表面的法线分布。这些策略集成到一种混合几何和材料表示中,后者使用显式和隐式方法来描绘光面对象。我们通过定量分析和定性可视化表明,所提出的方法有效地重建了光面对象的高保真几何和材料,优于当前的SOTA。

关键词

引用

@article{arxiv.2410.13349,
  title  = {GlossyGS: Inverse Rendering of Glossy Objects with 3D Gaussian Splatting},
  author = {Shuichang Lai and Letian Huang and Jie Guo and Kai Cheng and Bowen Pan and Xiaoxiao Long and Jiangjing Lyu and Chengfei Lv and Yanwen Guo},
  journal= {arXiv preprint arXiv:2410.13349},
  year   = {2024}
}