中文

无需文本:从生育率和元数据预测机器翻译质量与不平等

计算与语言 2026-03-04 v2 人工智能

摘要

我们展示了在翻译系统本身运行之前,仅凭少量特征即可准确预测翻译质量。这些特征包括词汇生育率比例、词汇计数以及基本语言元数据(语言族、书写系统和地区)。我们能够在FLORES-200基准测试中,对203种语言的GPT-4o翻译预测ChrF分数。梯度提升模型在XX→English的R2=0.66R^{2}=0.66,以及English→XX的R2=0.72R^{2}=0.72方差解释度表现优异。特征重要性分析揭示,语言类型因素在预测翻译到英文方面占主导地位,而生育率在预测翻译到多样化目标语言方面作用更大。这些发现表明,翻译质量受词汇级别的生育率以及更广泛的语言类型共同塑造,为多语言评估和质量估计提供了新的见解。

关键词

引用

@article{arxiv.2509.05425,
  title  = {No Text Needed: Forecasting MT Quality and Inequity from Fertility and Metadata},
  author = {Jessica M. Lundin and Ada Zhang and David Adelani and Cody Carroll},
  journal= {arXiv preprint arXiv:2509.05425},
  year   = {2026}
}