EdgeXAR:一种面向移动增强现实、具备用户友好延迟补偿的6-DoF相机多目标交互框架
人机交互
2021-11-10 v1
摘要
近期移动设备的计算能力使其能够处理自然特征用于增强现实(AR),但其可扩展性仍受限于设备算力与可用资源。本文提出EdgeXAR,一种利用边缘计算优势、通过任务卸载来支持灵活的基于相机的AR交互的移动AR框架。我们提出一种面向移动设备的混合跟踪系统,提供轻量级6自由度跟踪,并将卸载延迟隐藏于用户感知之外。采用一种实际、可靠与不可靠相结合的通信机制,以实现快速响应与关键信息的一致性。我们还提出一种多目标图像检索流水线,在云端与边缘服务器上执行快速准确的图像识别任务。通过在其上构建移动AR应用,我们进行了大量实验以评估EdgeXAR的性能。在体验质量(QoE)方面,由EdgeXAR框架驱动的移动AR应用平均以每秒30帧运行,跟踪精度仅1~2像素误差,图像识别准确率至少97%。与领先商业AR框架之一Vuforia相比,EdgeXAR传输数据减少87%,同时提供稳定的30 FPS性能,并根据传输介质将卸载延迟降低50至70%。我们的工作促进了AR作为下一代普适界面的大规模部署。
引用
@article{arxiv.2111.05173,
title = {EdgeXAR: A 6-DoF Camera Multi-target Interaction Framework for MAR with User-friendly Latency Compensation},
author = {Wenxiao Zhang and Sikun Lin and Farshid Hassani Bijarbooneh and Haofei Cheng and Tristan Braud and Pengyuan Zhou and Lik-hang Lee and Pan Hui},
journal= {arXiv preprint arXiv:2111.05173},
year = {2021}
}
备注
24 pages, ACM EICS'22. arXiv admin note: substantial text overlap with arXiv:1805.03060