VDG:仅视觉动态高斯溅射用于驾驶仿真
计算机视觉与模式识别
2024-06-27 v1
摘要
动态高斯溅射在新视角的场景重建和图像合成方面取得了令人瞩目的进展。然而,现有方法严重依赖于通过运动恢复结构(SfM)算法或昂贵传感器预计算的位姿和高斯初始化。本文首次通过将自监督视觉里程计(VO)集成到我们的无位姿动态高斯方法(VDG)中来解决这一问题,以增强位姿和深度初始化以及静态-动态分解。此外,VDG 仅需 RGB 图像输入即可工作,并且与无位姿动态视角合成方法相比,能够以更快的速度构建动态场景和更大的场景。我们通过大量的定量和定性实验证明了我们方法的鲁棒性。我们的结果显示,其性能优于最先进的动态视角合成方法。附加视频和源代码将发布在我们的项目页面上:https://3d-aigc.github.io/VDG。
引用
@article{arxiv.2406.18198,
title = {VDG: Vision-Only Dynamic Gaussian for Driving Simulation},
author = {Hao Li and Jingfeng Li and Dingwen Zhang and Chenming Wu and Jieqi Shi and Chen Zhao and Haocheng Feng and Errui Ding and Jingdong Wang and Junwei Han},
journal= {arXiv preprint arXiv:2406.18198},
year = {2024}
}