基于语言相似度的零样本跨语言迁移语言选择
计算与语言
2023-02-01 v1
摘要
我们研究了针对不同自然语言处理任务(具体为情感分析、命名实体识别与依存句法分析)的迁移语言选择。为选取最优迁移语言,我们提出利用不同的语言相似度度量来衡量语言间的距离,并基于该信息而非依赖直觉来做出迁移语言的选择。我们证明,对于所有提出的任务,语言相似度与跨语言迁移性能相关。我们还表明,选择最优语言作为迁移源而非英语,存在统计显著差异。这使我们能够选取更合适的迁移语言,从而更好地利用高资源语言的知识,以改善缺乏数据的语言应用性能。本研究中,我们使用了来自三个语系的八种不同语言的数据集。
引用
@article{arxiv.2301.13720,
title = {Zero-shot cross-lingual transfer language selection using linguistic similarity},
author = {Juuso Eronen and Michal Ptaszynski and Fumito Masui},
journal= {arXiv preprint arXiv:2301.13720},
year = {2023}
}