SVG-IR:用于逆渲染的空间变形高斯光滑
计算机视觉与模式识别
2025-04-10 v1
摘要
从图像重建 3D 资产的任务称为逆渲染(IR),由于其惊人的本质,仍然是一个具有挑战性的任务。3D 高斯光滑(3DGS)已在新视角合成(NVS)任务中展现出惊人的能力。现有方法通过分离辐射为 BRDF 参数和照明来实现照明,但由于每个高斯的局限能力,导致重照明质量较差,伴随制造的间接照明缺乏物理约束。本文提出一种新框架,称为空间变形高斯逆渲染(SVG-IR),旨在增强 NVS 和重照明质量。为此,我们提出了一种新的表示方法——空间变形高斯(SVG),允许每个高斯具有空间变形参数。这种增强表示法配合类似于传统图形管道中顶点/片段着色的 SVG 光滑方案。此外,我们集成了基于物理的间接照明模型,以实现更真实的重照明。所提出的 SVG-IR 框架显著提升了渲染质量,在 PSNR 上超过最先进的 NeRF 方法 2.5 dB,在重照明任务中超过现有基于高斯的方法 3.5 dB,同时保持实时渲染速度。
引用
@article{arxiv.2504.06815,
title = {SVG-IR: Spatially-Varying Gaussian Splatting for Inverse Rendering},
author = {Hanxiao Sun and YuPeng Gao and Jin Xie and Jian Yang and Beibei Wang},
journal= {arXiv preprint arXiv:2504.06815},
year = {2025}
}