重新评估图像描述自动评价指标
计算与语言
2016-12-23 v1 计算机视觉与模式识别
摘要
近年来，从图像生成自然语言描述的任务受到了广泛关注。因此，以自动化方式评估此类图像描述方法变得越来越重要。在本文中，我们通过一系列精心设计的实验，对现有的图像描述评价指标进行了深入评估。此外，我们探索了将最近提出的词移距离（Word Mover's Distance, WMD）文档指标应用于图像描述任务。通过基于广泛的相关性、准确性和干扰评估，我们的研究结果概述了各指标之间的差异和/或相似之处及其相对鲁棒性。我们的结果还表明，与其他指标相比，WMD 具有显著优势。
引用
@article{arxiv.1612.07600,
title = {Re-evaluating Automatic Metrics for Image Captioning},
author = {Mert Kilickaya and Aykut Erdem and Nazli Ikizler-Cinbis and Erkut Erdem},
journal= {arXiv preprint arXiv:1612.07600},
year = {2016}
}