手语检测中签名者重叠的重要性
计算与语言
2023-03-21 v1 计算机视觉与模式识别
摘要
手语检测,即判断某人是否正在打手语,因其于远程会议软件中的应用以及为训练手语识别或翻译任务筛选有用手语数据而变得至关重要。我们指出,当前手语检测的基准数据集由于训练与测试划分间存在签名者重叠,估计出了过于乐观且泛化不佳的结果。我们通过详细分析签名者重叠对当前手语检测基准数据集的影响来量化此问题。在 DGS 语料库与 Signing in the Wild 上比较有重叠与无重叠时的准确率,我们分别观察到准确率相对下降 4.17% 与 6.27%。此外,我们提出了无重叠的新数据集划分,以实现更真实的性能评估。我们希望本工作有助于提升手语检测系统的准确度与泛化能力。
引用
@article{arxiv.2303.10782,
title = {On the Importance of Signer Overlap for Sign Language Detection},
author = {Abhilash Pal and Stephan Huber and Cyrine Chaabani and Alessandro Manzotti and Oscar Koller},
journal= {arXiv preprint arXiv:2303.10782},
year = {2023}
}