中文

基于国际音标符号的零样跨语言命名实体识别:面向低资源语言

计算与语言 2024-10-23 v2 人工智能

摘要

现有的零样跨语言命名实体识别方法需要大量的目标语言先验知识,这在低资源语言情境下难以实现。本文提出一种新颖的方法,通过基于国际音标符号(IPA)的音素表示来弥合不同语言表示之间的差距。我们的实验表明,该方法在极端低资源语言上显著优于基线模型,最高平均 F1 分数达到 46.38%,标准差最低为 12.67,尤其在非拉丁字符脚本上表现出良好的鲁棒性。我们的代码已公开于 https://github.com/Gabriel819/zeroshot_ner.git

关键词

引用

@article{arxiv.2406.16030,
  title  = {Zero-Shot Cross-Lingual NER Using Phonemic Representations for Low-Resource Languages},
  author = {Jimin Sohn and Haeji Jung and Alex Cheng and Jooeon Kang and Yilin Du and David R. Mortensen},
  journal= {arXiv preprint arXiv:2406.16030},
  year   = {2024}
}

备注

Accepted to EMNLP 2024 Main Conference