面向大规模真实世界室内场景的多视图逆渲染
计算机视觉与模式识别
2023-03-22 v4
摘要
我们提出一种高效的多视图逆渲染方法，用于大规模真实世界室内场景，可重建全局光照与物理合理的 SVBRDF。与先前将大场景全局光照简化为多个环境贴图的表示不同，我们提出一种称为基于纹理的光照（TBL）的紧凑表示。它由 3D 网格与 HDR 纹理组成，高效建模整个大场景的直接光照与无限次弹射间接光照。基于 TBL，我们进一步提出一种带预计算辐照度的混合光照表示，显著提升了效率并缓解了材质优化中的渲染噪声。为从物理上解耦材质间的歧义，我们提出一种基于语义分割与房间分割先验的三阶段材质优化策略。大量实验表明，所提方法在定量与定性上均优于当前最优（SOTA），并支持物理合理的混合现实应用，如材质编辑、可编辑新视角合成与重光照。项目页面见 https://lzleejean.github.io/TexIR。
引用
@article{arxiv.2211.10206,
title = {Multi-view Inverse Rendering for Large-scale Real-world Indoor Scenes},
author = {Zhen Li and Lingli Wang and Mofang Cheng and Cihui Pan and Jiaqi Yang},
journal= {arXiv preprint arXiv:2211.10206},
year = {2023}
}
备注
Accepted to CVPR 2023. The project page is at: https://lzleejean.github.io/TexIR