基于单目SLAM的增强现实多用户定位系统与图像遮挡处理
人机交互
2024-11-19 v1 计算机视觉与模式识别
摘要
近年来，随着增强现实（AR）技术的快速发展，多用户协作体验的需求日益增长。与单用户体验不同，确保每个用户的空间定位以及多用户间定位和朝向的同步与一致性是一个重大挑战。本文提出了一种基于ORB-SLAM2的多用户定位系统，该系统使用单目RGB图像作为输入，并以Unity 3D游戏引擎为开发平台。该系统不仅执行用户定位，还在环境中的平面表面（如桌子）上放置一个公共虚拟对象，使每个用户都能获得该对象的正确视角。这些生成的虚拟对象作为多用户位置同步的参考点。定位信息通过中央服务器在每位用户的AR设备之间传递，基于此，特定用户空间中其他用户的相对位置和运动通过虚拟化身相对于这些虚拟对象呈现。此外，我们利用深度学习技术从单张RGB图像估计深度图，以解决AR应用中的遮挡问题，使虚拟对象在AR场景中显得更加自然。
引用
@article{arxiv.2411.10940,
title = {A Monocular SLAM-based Multi-User Positioning System with Image Occlusion in Augmented Reality},
author = {Wei-Hsiang Lien and Benedictus Kent Chandra and Robin Fischer and Ya-Hui Tang and Shiann-Jang Wang and Wei-En Hsu and Li-Chen Fu},
journal= {arXiv preprint arXiv:2411.10940},
year = {2024}
}