XR 环境下的多模态生物-物理相互作用：混合博士学位答辩
多媒体
2026-03-17 v1 人机交互
摘要
学术活动（如博士学位答辩）通常局限于物理协同或平面视频会议，导致参与形式僵化且存在碎片化的现场感。我们提出一种多模态框架，通过支持从现场出席到沉浸式虚拟现实(VR)或浏览器访问的参与者，从而打破这种二元化。我们报告了在该框架下组织首次混合博士学位答辩的经验。该框架集成了全身动作追踪，以同步用户的化身动作和手势，实现与现场参与者的自然交互，以及在虚拟世界中与远程参与者的身体语言和手势交互。它利用 WebXR 实现跨平台和即时可访问，设置简单。用户反馈分析显示，VR 体验积极，证明了该框架在支持各种混合活动方面的有效性。
引用
@article{arxiv.2603.15392,
title = {Multimodal Cyber-physical Interaction in XR: Hybrid Doctoral Thesis Defense},
author = {Ahmad Alhilal and Kit Yung Lam and Lik-Hang Lee and Xuetong Wang and Sijia Li and Matti Siekkinen and Tristan Braud and Pan Hui},
journal= {arXiv preprint arXiv:2603.15392},
year = {2026}
}
备注
10 pages, 3 figures, magazine paper