HoloLens与即时NeRF结合：先进的实时三维移动测绘
计算机视觉与模式识别
2023-05-04 v2
摘要
本工作是基于RGB相机图像实现快速三维重建现代方法的重要进展。我们利用Microsoft HoloLens 2作为多传感器平台，其包含RGB相机和用于基于SLAM的相机位姿确定的惯性测量单元，并用从HoloLens获取的数据实时训练神经辐射场(NeRF)作为神经场景表示。HoloLens通过Wifi连接至负责训练与三维重建的高性能PC。数据流结束后，停止训练并启动三维重建，提取场景点云。借助我们专门的推理算法，可在1秒内提取五百万个场景点。此外，点云还包含每点的辐射度量。我们的三维重建方法在性能上比基于NeRF的网格点采样快数个数量级，可视为移动测绘配置中一种完整的实时三维重建方法。
引用
@article{arxiv.2304.14301,
title = {Combining HoloLens with Instant-NeRFs: Advanced Real-Time 3D Mobile Mapping},
author = {Dennis Haitz and Boris Jutzi and Markus Ulrich and Miriam Jaeger and Patrick Huebner},
journal= {arXiv preprint arXiv:2304.14301},
year = {2023}
}
备注
8 pages, 6 figures