用于语码转换命名实体识别的层次化元嵌入
计算与语言
2019-09-19 v1
摘要
在多种主要语言通用的国家，在对话中混合不同语言通常被称为语码转换。以往应对此挑战的工作主要关注词级方面，如词嵌入。然而，在许多情况下，语言共享常见的子词，特别是对于亲缘语言，但也包括看似无关的语言。因此，我们提出层次化元嵌入（HME），其学习组合多种单语词级和子词级嵌入，以创建与语言无关的词汇表示。在英语-西班牙语语码转换数据的命名实体识别任务上，我们的模型在多语设置中达到了最先进的性能。我们还表明，在跨语言设置中，我们的模型不仅利用亲缘语言，还从具有不同语源的语言中学习。最后，我们表明组合不同子单元对于捕捉语码转换实体至关重要。
引用
@article{arxiv.1909.08504,
title = {Hierarchical Meta-Embeddings for Code-Switching Named Entity Recognition},
author = {Genta Indra Winata and Zhaojiang Lin and Jamin Shin and Zihan Liu and Pascale Fung},
journal= {arXiv preprint arXiv:1909.08504},
year = {2019}
}
备注
Accepted by EMNLP 2019