中文

ChameleonControl:通过混合现实手势引导远程操控真实人类替身用于远程实操课堂

人机交互 2023-02-23 v1

摘要

我们提出 ChameleonControl,一种用于可扩展远程实操教学中的真实人类遥操作系统。与现有的基于视频或 AR/VR 的远程实操教育不同,ChameleonControl 使用真实人类作为远程教师的替身。在现有基于人类的远程呈现方法基础上,我们贡献了一种通过同步混合现实手部手势导航与语言交流来遥操作人类替身的新方法。通过在本地用户的 MR 视图中叠加远程教师的虚拟手部,远程教师可以像亲临现场一样引导并控制本地用户。这使得本地用户/替身能够将其手部动作与手势与远程教师同步,从而有效遥操作真实人类。我们在物理治疗培训的课堂以及其他应用领域(如机械装配、手语和烹饪课程)中部署并评估了我们的系统。研究结果证实,我们的方法能够提升参与度与共同在场感,展现出远程实操课堂未来的潜力。

关键词

引用

@article{arxiv.2302.11053,
  title  = {ChameleonControl: Teleoperating Real Human Surrogates through Mixed Reality Gestural Guidance for Remote Hands-on Classrooms},
  author = {Mehrad Faridan and Bheesha Kumari and Ryo Suzuki},
  journal= {arXiv preprint arXiv:2302.11053},
  year   = {2023}
}

备注

CHI 2023