中文

RISE-SDF:用于光泽物体逆渲染的可重光照信息共享符号距离场

计算机视觉与模式识别 2024-10-11 v3 图形学

摘要

在本文中,我们提出了一种新颖的端到端可重光照逆渲染系统,能够高质量地重建几何和材质属性,从而实现高质量的重光照。我们方法的核心是一种两阶段方法,用于更好地分解场景参数。在第一阶段,我们开发了一个反射感知辐射场,使用神经符号距离场(SDF)作为几何表示,并部署多层感知机(MLP)来估计间接光照。在第二阶段,我们引入了一种新颖的信息共享网络结构,以联合学习辐射场和场景的基于物理的分解。对于基于物理的分解,为了减少蒙特卡洛采样带来的噪声,我们应用了带有简化 Disney BRDF 和立方体贴图 mipmap 的分裂和近似作为环境光表示。在重光照阶段,为了提升间接光照的质量,我们提出了第二种分裂和算法,在分裂和渲染框架下追踪次级光线。此外,目前没有针对光泽物体逆渲染性能的数据集或协议可用于定量评估。为了评估材质重建和重光照的质量,我们创建了一个带有真实 BRDF 参数和重光照结果的新数据集。我们的实验表明,我们的算法在逆渲染和重光照方面达到了最先进的性能,尤其是在高反射物体的重建方面表现出色。

关键词

引用

@article{arxiv.2409.20140,
  title  = {RISE-SDF: a Relightable Information-Shared Signed Distance Field for Glossy Object Inverse Rendering},
  author = {Deheng Zhang and Jingyu Wang and Shaofei Wang and Marko Mihajlovic and Sergey Prokudin and Hendrik P. A. Lensch and Siyu Tang},
  journal= {arXiv preprint arXiv:2409.20140},
  year   = {2024}
}

备注

https://dehezhang2.github.io/RISE-SDF/