手语培训项目：ISENSE项目中通过虚拟现实促进社会融合
人机交互
2024-04-03 v1 人工智能
计算机视觉与模式识别
图形学
摘要
手语使用包含视觉动作和符号的结构化手势。手语对于聋人或言语障碍者是宝贵的日常交流手段，但在听力正常人群中仍不常见，且能理解手语的人更少。在学术环境中，家长和教师在支持聋生从童年时期学习手语方面扮演着关键角色。近年来，在所有有助于学习手语的教学工具中，虚拟现实（VR）的使用有所增加，因为它已被证明能改善学习过程中的记忆保持、记忆力和注意力。ISENSE项目旨在通过提出不同的技术工具，在学术环境中向听力群体教授手语，从而在聋生的学术生涯中为他们提供支持。作为ISENSE项目的一部分，本工作旨在开发一款西班牙语和意大利语手语识别应用，该应用利用VR环境快速简便地创建一个全面的手语数据库，并开发一个基于人工智能（AI）的软件，以准确分类和识别静态与动态手语：从字母到句子。
引用
@article{arxiv.2401.08714,
title = {Training program on sign language: social inclusion through Virtual Reality in ISENSE project},
author = {Alessia Bisio and Enrique Yeguas-Bolívar and Pilar Aparicio-Martínez and María Dolores Redel-Macías and Sara Pinzi and Stefano Rossi and Juri Taborri},
journal= {arXiv preprint arXiv:2401.08714},
year = {2024}
}
备注
6 pages, 4 figures, MetroXRAINE 2023 Conference, ISENSE european project