PlanarRecon:基于位姿单目视频的实时三维平面检测与重建
计算机视觉与模式识别
2022-06-16 v1 机器人学
摘要
我们提出 PlanarRecon——一种从带位姿的单目视频中全局一致地检测与重建三维平面的新框架。与以往从单幅图像在二维中检测平面的工作不同,PlanarRecon 利用神经网络,从场景的体积表示中为每个视频片段(由一组关键帧构成)增量式地在三维中检测平面。我们设计了一个基于学习的跟踪与融合模块,将先前片段中的平面合并,以形成一致的全局平面重建。这样的设计使 PlanarRecon 能够整合每个片段内多视角的观测以及不同片段间的时间信息,从而以低多边形几何实现对场景抽象准确且一致的重建。实验表明,所提方法在 ScanNet 数据集上取得了最先进的性能,同时保持实时性。
引用
@article{arxiv.2206.07710,
title = {PlanarRecon: Real-time 3D Plane Detection and Reconstruction from Posed Monocular Videos},
author = {Yiming Xie and Matheus Gadelha and Fengting Yang and Xiaowei Zhou and Huaizu Jiang},
journal= {arXiv preprint arXiv:2206.07710},
year = {2022}
}
备注
CVPR 2022. Project page: https://neu-vi.github.io/planarrecon/