中文

SignCol:用于采集手语手势的开源软件

人机交互 2019-11-04 v1 计算机视觉与模式识别 机器学习

摘要

手语利用手势(如手或头部运动)进行交流。手语识别是面向听力障碍人士的辅助技术,其目标是通过促进社会参与来改善此类人群的生活质量。由于手语在字母表(即手势)上差异巨大,手语识别软件应能处理八种不同类型的手势组合,例如数字、字母、单词和句子。由于符号手势固有的复杂性与多样性,识别算法需要全面的视觉数据集以供学习。本文描述了一个基于 Microsoft Kinect 的开源软件 SignCol 的设计与实现,用于捕获并保存手语中使用的手势。我们的工作支持多语言数据库并报告所记录条目的统计信息。SignCol 可同时捕获并存储彩色(RGB)帧、深度帧、红外帧、身体索引帧、坐标映射的彩色-身体帧、每帧的骨骼信息以及相机参数。

关键词

引用

@article{arxiv.1911.00071,
  title  = {SignCol: Open-Source Software for Collecting Sign Language Gestures},
  author = {Mohammad Eslami and Mahdi Karami and Sedigheh Eslami and Solale Tabarestani and Farah Torkamani-Azar and Christoph Meinel},
  journal= {arXiv preprint arXiv:1911.00071},
  year   = {2019}
}

备注

The paper is presented at ICSESS conference but the published version by them on the IEEE Xplore is impaired and the quality of figures is inappropriate!! This is the preprint version which had appropriate format and figures