Unbabel 参与 WMT20 指标共享任务
计算与语言
2020-10-30 v1
摘要
我们介绍 Unbabel 团队对 WMT 2020 指标共享任务的贡献。我们打算参与所有语言对的片段级、文档级和系统级赛道，以及“QE 作为指标”赛道。相应地，我们参考上一年的测试集展示了我们的模型在这些赛道中的结果。我们的提交基于最近提出的 COMET 框架：我们训练了多个估计器模型以回归不同人工生成的质量分数，以及一个在来自直接评估（Direct Assessments）的相对排名上训练的新颖排序模型。我们还提出了一种将片段级预测转换为文档级分数的简单技术。总体而言，我们的系统在上一年测试集的所有语言对上都取得了强劲结果，并且在许多情况下达到了新的 state-of-the-art。
引用
@article{arxiv.2010.15535,
title = {Unbabel's Participation in the WMT20 Metrics Shared Task},
author = {Ricardo Rei and Craig Stewart and Catarina Farinha and Alon Lavie},
journal= {arXiv preprint arXiv:2010.15535},
year = {2020}
}
备注
WMT Metrics Shared Task 2020