虚拟现实在手语教育中的应用:机遇、挑战与前路
人机交互
2025-09-09 v2
摘要
手语(SL)是盲人和聋人(DHH)的重要沟通方式。其教育受限于缺乏合格教师、缺乏早期暴露以及传统教学方法的不足。近期虚拟现实(VR)和人工智能(AI)的进展为通过沉浸式、交互式和反馈丰富的环境来增强手语学习提供了前景。本文系统性地综述了55项同行评议研究,识别并分析了五个核心主题领域:(1)手势识别与实时反馈机制;(2)面向交流实践的交互式VR环境;(3)用于沉浸式和动机驱动学习体验的游戏化;(4)面向个性化和自适应学习系统的技术;(5)面向多样化DHH学习者的可及性与包容性。结果表明,集成了AI驱动的手势识别系统可与VR结合,提供实时反馈,显著提高学习者的参与度和表现。然而,分析结果还指出了关键挑战:硬件限制、手势识别准确率不一致以及缺乏包容性和自适应设计。本综述为该领域的技术与教育学创新提供了全面综合,概述当前局限性并提出可行的建议,供开发者和研究者参考。通过将技术进步与包容性教学方法相结合,本综述为面向全球手语学习者的下一代VR系统奠定了平等、有效和可及性的基础。
引用
@article{arxiv.2508.17362,
title = {Virtual Reality in Sign Language Education: Opportunities, Challenges, and the Road Ahead},
author = {Santiago Berrezueta-Guzman and Refia Daya and Stefan Wagner},
journal= {arXiv preprint arXiv:2508.17362},
year = {2025}
}
备注
Paper submitted to Frontiers in Virtual Reality