基于离散自编码器的多义嵌入双语学习
计算与语言
2016-03-31 v1 机器学习
机器学习
摘要
我们提出一种依赖单语和双语信息学习多义词嵌入的方法。我们的模型由一个编码器和一个解码器组成:编码器利用单语和双语上下文(即平行句)为给定词选择义项,解码器基于所选义项预测上下文词。这两个组件被联合估计。我们观察到,尽管测试时无法获得跨语言信息,但从双语数据诱导出的词表示在一系列评测任务上优于单语对应表示。
引用
@article{arxiv.1603.09128,
title = {Bilingual Learning of Multi-sense Embeddings with Discrete Autoencoders},
author = {Simon Šuster and Ivan Titov and Gertjan van Noord},
journal= {arXiv preprint arXiv:1603.09128},
year = {2016}
}
备注
11 pages, to appear at NAACL 2016