迈向空间计算:XR头显多模态自然交互的最新进展
人机交互
2025-06-16 v2
摘要
随着扩展现实(XR)头显的广泛采用,空间计算技术正受到越来越多的关注。空间计算通过眼动追踪、手势和语音命令等自然输入方法实现与虚拟元素的交互,从而将自然人机交互置于其核心。虽然先前的综述回顾了传统的XR交互技术,但自然交互的最新进展,特别是受人工智能(AI)和大型语言模型(LLMs)驱动的进展,引入了新的范式和技术。在本文中,我们回顾了可穿戴XR多模态自然交互的研究,重点关注2022年至2024年间在六个顶级会议/期刊上发表的论文:ACM CHI、UIST、IMWUT (Ubicomp)、IEEE VR、ISMAR和TVCG。我们根据应用场景、操作类型和交互模态对这些研究进行了分类和分析。该分析为理解研究人员如何在XR中设计先进的自然交互技术提供了一个结构化的框架。基于这些发现,我们讨论了自然交互技术中的挑战,并提出了未来研究的潜在方向。本综述旨在为希望为XR设计自然且高效的交互系统的研究人员提供有价值的见解,最终促进空间计算的发展。
引用
@article{arxiv.2502.07598,
title = {Towards spatial computing: recent advances in multimodal natural interaction for XR headsets},
author = {Zhimin Wang and Maohang Rao and Shanghua Ye and Weitao Song and Feng Lu},
journal= {arXiv preprint arXiv:2502.07598},
year = {2025}
}
备注
28 pages, 10 figures