面向生成式医学摘要质量的客观评估
计算与语言
2021-04-12 v1
摘要
我们提出一种评估生成文本质量的方法，通过要求评估者统计事实数量，并基于原始计数计算精确率、召回率、F分数和准确率。我们认为这种方法能带来更客观且更易复现的评估。我们将此方法应用于医学报告摘要任务，在该任务中衡量客观质量与准确性至关重要。
引用
@article{arxiv.2104.04412,
title = {Towards objectively evaluating the quality of generated medical summaries},
author = {Francesco Moramarco and Damir Juric and Aleksandar Savkov and Ehud Reiter},
journal= {arXiv preprint arXiv:2104.04412},
year = {2021}
}