用于印度手语识别的基于空间关系的特征

在本文中，解决了在句子层面上识别听力障碍者所打手语的任务。提出了一种提取空间特征以捕捉手语者手部运动的新方法。对给定手语视频的帧进行预处理，以提取手语者的面部和手部成分。利用提取成分的局部质心以及全局质心来提取空间特征。探索了区间值类型符号数据的概念，以捕捉不同手语者在不同时间实例下打出同一手语的变化。研究了一种合适的符号相似性度量，以建立测试手语与参考手语之间的匹配，并使用简单的近邻分类器通过将未知手语指定为已知手语之一并设定所需阈值水平来识别未知手语。为了评估所提出系统的性能，在我们研究工作过程中创建的相当大的手语数据库上进行了广泛的实验。