语言识别作为基于唇动的生物视觉系统的性能提升手段
计算机视觉与模式识别
2023-02-28 v1 人工智能
摘要
语言一直是人类的定义性特征之一。视觉语言识别（VLI）是一个相对较新、复杂且研究甚少的研究领域。在本文中，我们提出了一项初步研究，其中将语言信息作为一种软生物特征，以增强基于唇动运动的视觉（无听觉）识别系统的性能。我们报告了所提出的视觉系统因采用基于分数的融合策略整合这些数据而带来的识别性能的显著提升。我们考虑并评估了深度学习和机器学习方法。为实验目的，创建了名为 laBial Articulation for the proBlem of the spokEn Language rEcognition（BABELE）的数据集，其包含八种不同语言。它收录了不同的特征集合，其中所说语言是最相关的特征，同时每个样本还人工标注了受试者的性别与年龄。
引用
@article{arxiv.2302.13902,
title = {Language identification as improvement for lip-based biometric visual systems},
author = {Lucia Cascone and Michele Nappi and Fabio Narducci},
journal= {arXiv preprint arXiv:2302.13902},
year = {2023}
}