德语与德语手语 (DGS) 词义之间对应关系如何?
计算与语言
2026-02-17 v1
摘要
手语词典编者通过建立单词到手势的映射来构建双语词典,其中对应于不同语境下不同手势的多义词和同源词往往被低估。基于使用情况的方法可检验单词意义如何映射到手势,从而识别当前词典中缺失的新映射,丰富词典资源。我们通过分析德语和德语手语 (Deutsche Geb"ardensprache, DGS),手动标注 1,404 个单词使用-手势 ID 映射,这些映射来自德语词语使用图 (D-WUG) 中的 32 个单词和数字德语手语数字词典 (DW-DGS) 中的 49 个手势。我们识别了三种对应类型:类型 1 (一对多)、类型 2 (多对一)、类型 3 (一对一),以及无匹配情况。我们评估了计算方法:精确匹配 (Exact Match, EM) 和语义相似度 (Semantic Similarity, SS) 使用 SBERT 嵌入。SS 在整体上显著优于 EM (88.52% vs. 71.31%),在类型 1 中提升尤为显著 (+52.1 个百分点)。我们的工作建立了第一个用于跨模态语义对应的数据集,并揭示了哪些对应模式是可计算识别的。我们的代码和数据集已公开提供。
引用
@article{arxiv.2602.13790,
title = {How Do Lexical Senses Correspond Between Spoken German and German Sign Language?},
author = {Melis Çelikkol and Wei Zhao},
journal= {arXiv preprint arXiv:2602.13790},
year = {2026}
}
备注
EACL'26 (Student Research Workshop)