中文

LumiMotion:利用场景动态改进高斯光照重建

计算机视觉与模式识别 2026-04-14 v1

摘要

在3D重建中,逆渲染问题——即恢复场景照明和材质属性的能力是根本性挑战。现有基于高斯溅写(Gaussian Splatting)的方法主要针对静态场景,常假设简化或适度的照明以避免将阴影与表面外观混合。这限制了其在真实世界条件下准确分离照明效应与材质属性的能力。为此,我们利用动态元素——即 undergo 动作的场景区域——作为逆渲染的监督信号。运动揭示了在不同照明条件下相同表面的情况,提供了更强的材质与照明解耦线索。我们的实验结果表明,相较于下一最佳基线方法,本方法在Albedo估计方面改进了23%,在场景重照明方面改进了15%。为此,我们引入LumiMotion——首个利用动态信息进行逆渲染的基于高斯的方法,能够在任意动态场景中运行。该方法学习一种动态2D高斯溅写表示,采用一组新颖约束鼓励场景动态区域发生形变,同时保持静态区域稳定。正如我们所展示的,这种分离对于正确优化Albedo至关重要。最后,我们发布了一个新的合成基准数据集,包含五个场景的四种照明条件,每个场景均有静态和动态两种变体,首次实现了在动态环境和具挑战性照明条件下系统性评估逆渲染方法的可能性。项目页面链接:https://joaxkal.github.io/LumiMotion/

关键词

引用

@article{arxiv.2604.10994,
  title  = {LumiMotion: Improving Gaussian Relighting with Scene Dynamics},
  author = {Joanna Kaleta and Piotr Wójcik and Kacper Marzol and Tomasz Trzciński and Kacper Kania and Marek Kowalski},
  journal= {arXiv preprint arXiv:2604.10994},
  year   = {2026}
}

备注

CVPR2026