VRSL：探索 360 度摄像头 feed 在虚拟现实中手语交流的可理解性
人机交互
2026-02-27 v1
摘要
本研究通过考察使用身体挂载式 360 度摄像头捕获的美国手语 (ASL) 视频的可理解性和用户体验，来探索将手语集成到虚拟现实 (VR) 中的可行性。十名参与者从位置为头部、肩部和胸部的身体挂载式视频中识别 ASL 手势。结果显示，肩部挂载摄像头达到了最高的准确率 (85%)，尽管各位置之间的差异并不具备统计显著性。参与者指出，360 度视频中的周边畸变影响了清晰度，凸显了改进的必要性。尽管存在挑战，总体可理解性成功率为 83.3%，表明视频基础的 ASL 沟通在 VR 中具有潜力。反馈强调需要细化摄像头角度、减少畸变并探索替代挂载位置。参与者表示，他们更倾向于在 VR 中进行手势交流而非基于文本的交流，突显了为听力受损 (DHH) 用户在虚拟环境中增强可及性和协作所需发展这一方法的重要性。
引用
@article{arxiv.2602.23265,
title = {VRSL:Exploring the Comprehensibility of 360-Degree Camera Feeds for Sign Language Communication in Virtual Reality},
author = {Gauri Umesh Rajmane and Ziming Li and Tae Oh and Roshan Peiris},
journal= {arXiv preprint arXiv:2602.23265},
year = {2026}
}
备注
16 pages, 3 figures