基于 ProbSom 的阿根廷手语手形识别
计算机视觉与模式识别
2023-10-27 v1 人工智能
机器学习
神经与进化计算
摘要
自动手语识别是人机交互与机器学习领域的重要课题。一方面，它提出了一个复杂挑战，需要视频处理、图像处理、智能系统与语言学等多个知识领域的介入。另一方面，鲁棒的手语识别可辅助翻译过程及听障人士的社会融入。本文提供两项主要贡献：首先，构建了阿根廷手语（LSA）手形数据库，该课题迄今鲜有讨论。其次，提出一种图像处理、描述子提取及后续手形分类技术，采用一种称为 ProbSom 的自组织映射监督自适应方法。该技术对比了支持向量机（SVM）、随机森林与神经网络等现有最优方法。所建数据库含 800 张图像、涵盖 16 种 LSA 手形，是构建综合性阿根廷手语数据库的第一步。基于 ProbSom 的神经网络分类器使用所提描述子取得了 90% 以上的准确率。
引用
@article{arxiv.2310.17427,
title = {Handshape recognition for Argentinian Sign Language using ProbSom},
author = {Franco Ronchetti and Facundo Manuel Quiroga and César Estrebou and Laura Lanzarini},
journal= {arXiv preprint arXiv:2310.17427},
year = {2023}
}