词向量对语言约束的反拟合
计算与语言
2016-03-04 v1 机器学习
摘要
在本工作中,我们提出了一种新颖的反拟合(counter-fitting)方法,其将反义与同义约束注入向量空间表示中,以提升向量判断语义相似度的能力。将该方法应用于公开可用的预训练词向量,在SimLex-999数据集上取得了新的最先进性能。我们还展示了该方法如何用于为对话状态跟踪这一下游任务定制词向量空间,从而在不同对话领域实现稳健的提升。
引用
@article{arxiv.1603.00892,
title = {Counter-fitting Word Vectors to Linguistic Constraints},
author = {Nikola Mrkšić and Diarmuid Ó Séaghdha and Blaise Thomson and Milica Gašić and Lina Rojas-Barahona and Pei-Hao Su and David Vandyke and Tsung-Hsien Wen and Steve Young},
journal= {arXiv preprint arXiv:1603.00892},
year = {2016}
}
备注
Paper accepted for the 15th Annual Conference of the North American Chapter of the Association for Computational Linguistics (NAACL 2016)