基于运动视差的单目球面视频三维场景重建
计算机视觉与模式识别
2022-06-15 v1 机器人学
图像与视频处理
摘要
本文描述一种利用具有运动视差的单个球面视频中相邻两帧捕获近乎完整球面(360度)深度信息的方法。在阐明利用两台球面相机进行球面深度信息获取后,我们借助稳定化的第一人称视频片段演示单目球面立体。实验表明,在立体角上多达 97% 的整个球面恢复了深度信息。以 30 km/h 的速度,我们能够估计距相机 30 m 以上物体的深度。我们还利用所得深度数据重建了三维结构(点云)并确认可清晰观测到这些结构。我们可将本方法应用于周边环境的3D结构获取,如 1) 电影预可视化、选址搜寻/规划,2) 真实场景/计算机图形学合成,以及 3) 动作捕捉。得益于其简洁性,该方法可应用于各类视频。除需为带运动视差的360视频外无其他前提条件,故可使用包括网络上的任何360视频重建周边环境。相机可轻量至搭载于无人机。我们也演示了此类应用。
引用
@article{arxiv.2206.06533,
title = {3D scene reconstruction from monocular spherical video with motion parallax},
author = {Kenji Tanaka},
journal= {arXiv preprint arXiv:2206.06533},
year = {2022}
}
备注
13 pages, 18 figures