LightHarmony3D：用于 3D 高斯溶解对象插入的光照与阴影和谐
计算机视觉与模式识别
2026-04-01 v1
摘要
3D 高斯溶解 (3DGS) 使我们能够高保真地重建场景几何与外观。基于此能力，插入外部网格对象到重建的 3DGS 场景中，可实现沉浸式应用（如 AR/VR、虚拟布置和数字内容创作）的交互式编辑和内容增强。然而，实现网格插入的物理一致光照与阴影仍具有挑战性，因为这需要精确的场景光照估计和多视图一致的渲染。为此，我们提出LightHarmony3D——一个用于 3DGS 场景中光照一致网格插入的新框架。我们方法的核心是提出的生成模块，通过单次前向传播预测插入位置处的完整 360° HDR 环境图。通过利用生成先验而非迭代优化，我们的方法有效捕获主导场景光照，为插入网格提供物理依托的着色与阴影，同时保持多视图一致性。此外，我们引入了首个专用于 3DGS 网格插入的基准，提供评估光照一致性和照明逼真性的标准化框架。跨多个真实世界重建数据集的广泛实验表明，LightHarmony3D 实现了最先进的逼真度和多视图一致性。
引用
@article{arxiv.2603.29209,
title = {LightHarmony3D: Harmonizing Illumination and Shadows for Object Insertion in 3D Gaussian Splatting},
author = {Tianyu Huang and Zhenyang Ren and Zhenchen Wan and Jiyang Zheng and Wenjie Wang and Runnan Chen and Mingming Gong and Tongliang Liu},
journal= {arXiv preprint arXiv:2603.29209},
year = {2026}
}