Factored-NeuS：重建可能具有光泽物体的表面、光照与材质

我们提出了一种从带位姿的多视角图像中恢复场景表面、材质与光照的方法。与先前工作不同，它不需要任何额外数据，且能处理光泽物体或强光照。这是一种渐进式逆渲染方法，由三个阶段组成。在第一阶段，我们利用一种针对镜面反射的新型正则化策略重建场景辐射与有符号距离函数（SDF）。我们提出联合使用表面渲染与体渲染来解释像素颜色，从而能在表面重建中处理复杂的视角相关光照效应。在第二阶段，我们使用可学习的映射函数从学到的SDF与辐射场中提炼光可见性与间接光照。最后，我们设计了一种估计以镜面方式反射的入射直接光比例的方法，并用以重建材质与直接光照。实验结果表明，所提方法在无需任何额外数据的情况下，在恢复表面、材质与光照方面优于当前最先进水平。