中文

CORI:集成罗马拼音的 CJKV 基准——迈向超越文字书写系统的跨语言迁移

计算与语言 2024-04-22 v1 人工智能 机器学习

摘要

天真地假设英语作为源语言可能会因为未能考虑语言接触的重要性而阻碍许多语言的跨语言迁移。某些语言比其他语言联系更紧密,目标语言可以从密切相关语言的迁移中受益;对于许多语言而言,密切相关的语言集合并不包括英语。在这项工作中,我们研究了源语言对跨语言迁移的影响,证明了选择与目标语言具有高接触度的源语言的重要性。我们还为密切接触的中日韩越(CJKV)语言构建了一个新颖的基准数据集,以进一步鼓励对语言接触的深入研究。为了全面捕捉这些语言之间的接触,我们提出通过对比学习目标集成超越文字书写系统的罗马拼音转录,从而增强跨语言表示并实现有效的零样本跨语言迁移。

关键词

引用

@article{arxiv.2404.12618,
  title  = {CORI: CJKV Benchmark with Romanization Integration -- A step towards Cross-lingual Transfer Beyond Textual Scripts},
  author = {Hoang H. Nguyen and Chenwei Zhang and Ye Liu and Natalie Parde and Eugene Rohrbaugh and Philip S. Yu},
  journal= {arXiv preprint arXiv:2404.12618},
  year   = {2024}
}

备注

Accepted at LREC-COLING 2024