理解 UGC 特性对翻译质量的影响
计算与语言
2021-10-26 v1
摘要
本工作批判性审视用户生成内容(UGC)机器翻译的评估问题,UGC 的已知特性给机器翻译(MT)带来诸多挑战。我们的分析表明,在 UGC 测试集上使用标准指标衡量平均情况性能远不能可靠反映 UGC 翻译质量。为此我们引入一个用于 UGC 翻译评估的新数据集,其中使用细粒度类型学手动标注了 UGC 特性。利用该数据集,我们进行了若干实验,以比以往更精确地衡量不同种类 UGC 特性对翻译质量的影响。
引用
@article{arxiv.2110.12551,
title = {Understanding the Impact of UGC Specificities on Translation Quality},
author = {José Carlos Rosales Núñez and Djamé Seddah and Guillaume Wisniewski},
journal= {arXiv preprint arXiv:2110.12551},
year = {2021}
}