中文

基于语言相似度的零样本跨语言迁移语言选择

计算与语言 2023-02-01 v1

摘要

我们研究了针对不同自然语言处理任务(具体为情感分析、命名实体识别与依存句法分析)的迁移语言选择。为选取最优迁移语言,我们提出利用不同的语言相似度度量来衡量语言间的距离,并基于该信息而非依赖直觉来做出迁移语言的选择。我们证明,对于所有提出的任务,语言相似度与跨语言迁移性能相关。我们还表明,选择最优语言作为迁移源而非英语,存在统计显著差异。这使我们能够选取更合适的迁移语言,从而更好地利用高资源语言的知识,以改善缺乏数据的语言应用性能。本研究中,我们使用了来自三个语系的八种不同语言的数据集。

关键词

引用

@article{arxiv.2301.13720,
  title  = {Zero-shot cross-lingual transfer language selection using linguistic similarity},
  author = {Juuso Eronen and Michal Ptaszynski and Fumito Masui},
  journal= {arXiv preprint arXiv:2301.13720},
  year   = {2023}
}