MetricX-24：面向WMT 2024 Metrics共享任务的Google提交
计算与语言
2024-10-08 v1
摘要
本文介绍了MetricX-24提交至WMT24 Metrics共享任务的方案，并详细说明了我们相较前一版本MetricX所做的改进。我们的主要提交是一种混合参考/非参考基准模型，可对给定源段、参考文本或两者皆可的翻译进行评分。该模型以两阶段方式在先前WMT数据上训练，首先仅使用DA评级，然后混合MQM与DA评级。两个阶段的训练集均经过增广，合成样本以提升模型对常见失效模式的鲁棒性，如流畅但无关译文或翻译不足。我们通过消融研究展示了各项修改的独立贡献，并在WMT23 MQM评级及其新的合成挑战集上显著提升性能。
引用
@article{arxiv.2410.03983,
title = {MetricX-24: The Google Submission to the WMT 2024 Metrics Shared Task},
author = {Juraj Juraska and Daniel Deutsch and Mara Finkelstein and Markus Freitag},
journal= {arXiv preprint arXiv:2410.03983},
year = {2024}
}
备注
Accepted to WMT24