抹去瞬逝:面向街景合成的联合相机精修与瞬态物体移除
计算机视觉与模式识别
2023-11-30 v1
摘要
为城市场景合成新视角对自动驾驶和虚拟漫游等任务至关重要。与物体级或室内场景相比,户外环境带来独特挑战,例如移动车辆导致的帧间不一致以及长序列下的相机位姿漂移。本文提出一种方法,应对户外场景视图合成中的这些挑战。我们采用神经点光场场景表示,并策略性地检测与掩蔽动态物体,以重建无伪影的新场景。此外,我们同时优化相机位姿与视图合成过程,从而同步精修这两个要素。通过在真实世界城市场景数据集上的验证,我们展示了在城市场景新视角合成上的最先进结果。
引用
@article{arxiv.2311.17634,
title = {Erasing the Ephemeral: Joint Camera Refinement and Transient Object Removal for Street View Synthesis},
author = {Mreenav Shyam Deka and Lu Sang and Daniel Cremers},
journal= {arXiv preprint arXiv:2311.17634},
year = {2023}
}