葡萄牙语词嵌入：在词类比与自然语言任务上的评估
计算与语言
2017-08-22 v1
摘要
人们发现词嵌入能够以高效的方式为单词提供有意义的表示；因此，它们在自然语言处理系统中已变得很常见。在本文中，我们评估了在一个包含巴西和欧洲变体的大型葡萄牙语语料库上训练的不同词嵌入模型。我们使用 FastText、GloVe、Wang2Vec 和 Word2Vec 训练了 31 个词嵌入模型。我们在句法和语义类比上对它们进行了内在评估，并在词性标注和句子语义相似性任务上进行了外在评估。所得结果表明，词类比不适合用于词嵌入评估；特定任务评估似乎是更好的选择。
引用
@article{arxiv.1708.06025,
title = {Portuguese Word Embeddings: Evaluating on Word Analogies and Natural Language Tasks},
author = {Nathan Hartmann and Erick Fonseca and Christopher Shulby and Marcos Treviso and Jessica Rodrigues and Sandra Aluisio},
journal= {arXiv preprint arXiv:1708.06025},
year = {2017}
}
备注
7 pages, STIL 2017 Full paper