Magnitude：一款快速高效的通用向量嵌入实用工具包
计算与语言
2018-10-29 v1 人工智能
摘要
诸如 word2vec、GloVe、fastText 和 ELMo 等向量空间嵌入模型是自然语言处理（NLP）应用中极为流行的表示方式。我们推出 Magnitude，一款用于利用和处理嵌入的快速轻量级工具。Magnitude 是一个开源 Python 包，具有紧凑的向量存储文件格式，可高效处理海量嵌入。Magnitude 执行常见操作的速度比 Gensim 快 60 至 6000 倍。Magnitude 引入了若干提升鲁棒性的新特性，如词表外查询。
引用
@article{arxiv.1810.11190,
title = {Magnitude: A Fast, Efficient Universal Vector Embedding Utility Package},
author = {Ajay Patel and Alexander Sands and Chris Callison-Burch and Marianna Apidianaki},
journal= {arXiv preprint arXiv:1810.11190},
year = {2018}
}