GaussianShader:基于着色函数的反射表面三维高斯泼溅
计算机视觉与模式识别
2023-12-01 v1
摘要
神经3D高斯的出现最近在神经渲染领域引发了一场革命,促进了以实时速度生成高质量渲染。然而,这种显式离散表示在应用于具有反射表面的场景时遇到挑战。本文中,我们提出GaussianShader,一种在3D高斯上应用简化着色函数的新方法,以增强在反射表面场景中的神经渲染,同时保持训练与渲染效率。应用着色函数的主要挑战在于离散3D高斯上的准确法线估计。具体而言,我们提出了一种基于3D高斯最短轴方向并配以精心设计的损失的新颖法线估计框架,以使法线与高斯球的几何结构保持一致。实验表明GaussianShader在效率与视觉质量之间取得了令人称道的平衡。我们的方法在镜面物体数据集上的PSNR超越Gaussian Splatting,展现出1.57dB的提升。与先前处理反射表面的工作(如Ref-NeRF)相比,我们的优化时间显著加快(23h对比0.58h)。请点击我们的项目网站查看更多结果。
引用
@article{arxiv.2311.17977,
title = {GaussianShader: 3D Gaussian Splatting with Shading Functions for Reflective Surfaces},
author = {Yingwenqi Jiang and Jiadong Tu and Yuan Liu and Xifeng Gao and Xiaoxiao Long and Wenping Wang and Yuexin Ma},
journal= {arXiv preprint arXiv:2311.17977},
year = {2023}
}
备注
13 pages, 11 figures, refrences added