KG-BERTScore:将知识图谱引入 BERTScore 用于无参考机器翻译评价
计算与语言
2023-01-31 v1 人工智能
摘要
BERTScore 是一种有效且鲁棒的基于参考的机器翻译自动评价指标。本文中,我们将多语言知识图谱引入 BERTScore,并提出一种名为 KG-BERTScore 的指标,该指标通过线性组合 BERTScore 与双语命名实体匹配的结果,用于无参考机器翻译评价。从 WMT19 QE 无参考共享任务(作为无参考指标)的实验结果来看,我们的指标 KG-BERTScore 与人工评判的总体相关性高于当前最先进的无参考机器翻译评价指标。此外,本文还研究了 KG-BERTScore 所使用的多语言预训练模型以及线性组合参数。
引用
@article{arxiv.2301.12699,
title = {KG-BERTScore: Incorporating Knowledge Graph into BERTScore for Reference-Free Machine Translation Evaluation},
author = {Zhanglin Wu and Min Zhang and Ming Zhu and Yinglu Li and Ting Zhu and Hao Yang and Song Peng and Ying Qin},
journal= {arXiv preprint arXiv:2301.12699},
year = {2023}
}
备注
5 pages