预处理对阿拉伯语-英语统计与神经机器翻译的影响
计算与语言
2019-06-28 v1
摘要
神经网络已成为许多语言机器翻译（MT）的最先进方法。虽然语言驱动的分词技术已被证明对统计机器翻译的性能有显著影响，但这些技术是否同样适用于神经机器翻译仍不清楚。在本文中，我们系统地比较了神经和统计机器翻译模型在通过各种主要分词方案预处理的数据上的阿拉伯语-英语翻译表现。此外，我们考虑了一系列数据和词汇量大小，并比较了它们对两种方法的影响。我们的实证结果表明，分词方案的最佳选择在很大程度上取决于模型类型和数据大小。我们还表明，通过使用结合神经和统计机器翻译输出的系统选择，可以获得显著改进。
引用
@article{arxiv.1906.11751,
title = {The Impact of Preprocessing on Arabic-English Statistical and Neural Machine Translation},
author = {Mai Oudah and Amjad Almahairi and Nizar Habash},
journal= {arXiv preprint arXiv:1906.11751},
year = {2019}
}
备注
Accepted to MT Summit 2019