基于人体运动分布建模的手语评估
计算机视觉与模式识别
2024-08-20 v1
摘要
手语评估(SLA)工具有助于语言学习,但目前发展尚不成熟。以往的研究工作集中于孤立手语或与单一参考视频进行比较来评估手语(SL)。本文介绍了一种新型的手语评估工具,通过对人体运动分布进行建模来评估手语的可理解性。我们在母语手语者的数据上训练模型,并使用手语学习者进行评估。我们将模型结果与人工评分进行比较,发现人工评分与我们的工具之间存在很强的相关性。我们通过可视化展示了该工具在时空上检测异常结果的能力,可提供可操作的反馈,以辅助手语学习和评估。
关键词
引用
@article{arxiv.2408.10073,
title = {Modelling the Distribution of Human Motion for Sign Language Assessment},
author = {Oliver Cory and Ozge Mercanoglu Sincan and Matthew Vowels and Alessia Battisti and Franz Holzknecht and Katja Tissi and Sandra Sidler-Miserez and Tobias Haug and Sarah Ebling and Richard Bowden},
journal= {arXiv preprint arXiv:2408.10073},
year = {2024}
}
备注
Accepted to Twelfth International Workshop on Assistive Computer Vision and Robotics at ECCV 2024