人工与自动度量：论相关性设计的重要性
计算与语言
2021-03-16 v3
摘要
本文讨论了自然语言生成领域中自动评估度量与人类评分之间相关性分析的两种现有方法。我们的实验表明，根据采用系统级还是句子级相关性分析，自动分数与人类判断之间的相关性结果是不一致的。
引用
@article{arxiv.1805.11474,
title = {Human vs Automatic Metrics: on the Importance of Correlation Design},
author = {Anastasia Shimorina},
journal= {arXiv preprint arXiv:1805.11474},
year = {2021}
}
备注
accepted for the WiNLP workshop at NAACL 2018; 3 pages