一种使用 RGB-D 传感器与头戴显示器的沉浸式远程呈现系统

我们提出一种远程沉浸式系统，使人们能够在虚拟世界中除语言交流外还使用身体手势进行互动。除了明显的应用（包括通用在线对话与游戏）之外，我们假设所提系统可通过提供丰富的视觉内容与交互性而对教育特别有益。一个显著特征是集成了自我中心姿态识别，使参与者能够同时使用手势来演示和操作虚拟对象。该功能使教师能够以直观方式有效且高效地解释和阐明复杂概念或棘手问题。相较于传统课堂环境，这种高度交互且灵活的环境能捕获并维持更多的学生注意力，从而为学生提供引人入胜的体验。我们此处的主要焦点是研究系统设计实现的可行方案，并设计适用于视觉数据处理与网络传输的快速高效计算策略。我们详细描述该技术与实验，并提供定量性能结果，表明我们的系统可在不同应用场景下舒适且可靠地运行。我们的初步结果令人鼓舞，并展示了在网络学习中更具吸引力方向的前景。