SyriSign:阿拉伯文本到叙利亚阿拉伯手语翻译的平行语料库
计算与语言
2026-04-01 v1 人工智能
计算机视觉与模式识别
人机交互
摘要
手语是聋人和听力受损者(DHH)的主要交流方式。尽管高资源手语已有众多基准,但低资源语言如阿拉伯语仍显得不足。目前尚无公开可用的叙利亚阿拉伯手语(SyArSL)数据集。为克服这一局限,我们引入SyriSign,一个包含1500个视频样本、涵盖150个独特词汇单元的数据集,旨在支持文本到SyArSL翻译任务。本工作旨在减少叙利亚地区的沟通障碍,因为大多数新闻以口语或书面阿拉伯语传递,而这些内容常对聋人社区不可及。我们使用MotionCLIP、T2M-GPT和SignCLIP三种深度学习架构评估了SyriSign。实验结果表明,虽然生成方法在手势表示方面显示出强大的潜力,但数据集规模受限限制了其泛化性能。我们将公开发布SyriSign,希望其能作为初始基准。
引用
@article{arxiv.2603.29219,
title = {SyriSign: A Parallel Corpus for Arabic Text to Syrian Arabic Sign Language Translation},
author = {Mohammad Amer Khalil and Raghad Nahas and Ahmad Nassar and Khloud Al Jallad},
journal= {arXiv preprint arXiv:2603.29219},
year = {2026}
}