ADDSL：基于标注丹麦手语的手势检测与手语识别
计算机视觉与模式识别
2023-05-18 v1 人工智能
机器学习
摘要
长期以来，检测手势并将其识别为字母或数字一直是一项具有挑战性的任务。这为残障人士造成了沟通障碍。本文介绍了一个新的数据集，即丹麦手语标注数据集（ADDSL）。数据集的标注使用开源工具LabelImg以YOLO格式完成。利用该数据集，训练了一个单阶段目标检测模型（YOLOv5），采用CSP-DarkNet53骨干和YOLOv3头，仅使用每类七张独特图像（无增强）来识别字母（A-Z）和数字（0-9）。五个模型训练了350个epoch，与先前研究相比，平均推理时间为每图9.02ms，最佳准确率达92%。我们的结果表明，修改后的模型高效且比同领域已有工作更准确。我们的模型代码仓库可在GitHub仓库 https://github.com/s4nyam/pvt-addsl 获取。
引用
@article{arxiv.2305.09736,
title = {ADDSL: Hand Gesture Detection and Sign Language Recognition on Annotated Danish Sign Language},
author = {Sanyam Jain},
journal= {arXiv preprint arXiv:2305.09736},
year = {2023}
}