NDJIR:用于真实物体几何、光照与材质的神经直接联合逆渲染
计算机视觉与模式识别
2023-02-03 v1 图形学
摘要
逆渲染的目标是在给定位姿多视图图像的情况下分解几何、光照与材质。为实现该目标,我们提出神经直接联合逆渲染,即 NDJIR。不同于依赖渲染方程某些近似的先前工作,NDJIR 直接处理渲染方程中的积分,并利用强大灵活的体渲染框架、体素网格特征和贝叶斯先验联合分解几何:有符号距离函数,光照:环境光与隐式光,材质:基础色、粗糙度、镜面反射率。我们的方法直接使用基于物理的渲染,因此我们可以将提取的带材质网格无缝导出到 DCC 工具,并展示材质转换示例。我们进行了密集实验以表明,所提方法能在摄影测量设置下对真实物体进行语义良好的分解,以及哪些因素有助于准确的逆渲染。
引用
@article{arxiv.2302.00675,
title = {NDJIR: Neural Direct and Joint Inverse Rendering for Geometry, Lights, and Materials of Real Object},
author = {Kazuki Yoshiyama and Takuya Narihira},
journal= {arXiv preprint arXiv:2302.00675},
year = {2023}
}
备注
26 pages