中文

SyriSign:阿拉伯文本到叙利亚阿拉伯手语翻译的平行语料库

计算与语言 2026-04-01 v1 人工智能 计算机视觉与模式识别 人机交互

摘要

手语是聋人和听力受损者(DHH)的主要交流方式。尽管高资源手语已有众多基准,但低资源语言如阿拉伯语仍显得不足。目前尚无公开可用的叙利亚阿拉伯手语(SyArSL)数据集。为克服这一局限,我们引入SyriSign,一个包含1500个视频样本、涵盖150个独特词汇单元的数据集,旨在支持文本到SyArSL翻译任务。本工作旨在减少叙利亚地区的沟通障碍,因为大多数新闻以口语或书面阿拉伯语传递,而这些内容常对聋人社区不可及。我们使用MotionCLIP、T2M-GPT和SignCLIP三种深度学习架构评估了SyriSign。实验结果表明,虽然生成方法在手势表示方面显示出强大的潜力,但数据集规模受限限制了其泛化性能。我们将公开发布SyriSign,希望其能作为初始基准。

关键词

引用

@article{arxiv.2603.29219,
  title  = {SyriSign: A Parallel Corpus for Arabic Text to Syrian Arabic Sign Language Translation},
  author = {Mohammad Amer Khalil and Raghad Nahas and Ahmad Nassar and Khloud Al Jallad},
  journal= {arXiv preprint arXiv:2603.29219},
  year   = {2026}
}