可重光照三维高斯:基于BRDF分解与光线追踪的真实感点云重光照
计算机视觉与模式识别
2024-08-09 v2 图形学
摘要
本文提出一种新颖的可微分基于点的渲染框架,以实现照片级真实感重光照。为使重建场景可重光照,我们增强普通三维高斯,为其关联额外属性,包括法向量、BRDF 参数以及来自不同方向的入射光照。从多视角图像集合出发,通过三维高斯溅射优化三维场景,同时由基于物理的可微分渲染分解 BRDF 与光照。为在照片级真实感重光照中产生合理的阴影效果,我们引入一种创新的基于点的光线追踪,利用包围体层次结构进行高效的可见性预计算。大量实验表明,与最先进方法相比,我们在 BRDF 估计、新视角合成与重光照结果上均有提升。所提框架展示了以基于点的流程取代基于网格的图形管线、实现编辑、追踪与重光照的潜力。
引用
@article{arxiv.2311.16043,
title = {Relightable 3D Gaussians: Realistic Point Cloud Relighting with BRDF Decomposition and Ray Tracing},
author = {Jian Gao and Chun Gu and Youtian Lin and Zhihao Li and Hao Zhu and Xun Cao and Li Zhang and Yao Yao},
journal= {arXiv preprint arXiv:2311.16043},
year = {2024}
}