手语辅导工具
机器学习
2008-09-11 v1 人机交互
摘要
在本项目中,我们开发了一款手语辅导系统,使用户能够通过观看录制视频并尝试相同手势来学习孤立手语。该系统录制用户视频并对其进行分析。若识别出手语,系统将向用户提供语音和动画反馈。该系统能够识别涉及手势以及头部运动和表情的复杂手语。性能测试显示,仅涉及手动手势的手语识别率为 99%,而涉及手动及非手动成分(如头部运动和面部表情)的手语识别率为 85%。
引用
@article{arxiv.0802.2428,
title = {Sign Language Tutoring Tool},
author = {Oya Aran and Ismail Ari and Alexandre Benoit and Ana Huerta Carrillo and François-Xavier Fanard and Pavel Campr and Lale Akarun and Alice Caplier and Michele Rombaut and Bulent Sankur},
journal= {arXiv preprint arXiv:0802.2428},
year = {2008}
}
备注
eNTERFACE'06. Summer Workshop. on Multimodal Interfaces, Dubrovnik : Croatie (2007)