好故事由何构成?为视觉叙事设计复合奖励
计算与语言
2020-02-27 v2
摘要
以往的叙事方法大多侧重于优化 BLEU、ROUGE 和 CIDEr 等传统指标。在本文中,我们从不同角度重新审视这一问题,深入探讨什么定义了一个现实自然且主题连贯的故事。为此,我们提出了三个评估标准:相关性、连贯性和表现力,我们通过实证分析观察到这些标准在人眼看来可以构成一个“高质量”故事。遵循这一质量准则,我们提出了一种强化学习框架 ReCo-RL,其奖励函数旨在捕捉这些质量标准的本质。在视觉叙事数据集(VIST)上通过自动和人工评估进行的实验表明,我们的 ReCo-RL 模型在传统指标和所提出的新标准上都取得了比最先进基线更好的性能。
引用
@article{arxiv.1909.05316,
title = {What Makes A Good Story? Designing Composite Rewards for Visual Storytelling},
author = {Junjie Hu and Yu Cheng and Zhe Gan and Jingjing Liu and Jianfeng Gao and Graham Neubig},
journal= {arXiv preprint arXiv:1909.05316},
year = {2020}
}
备注
Accepted paper in Thirty-Fourth AAAI Conference on Artificial Intelligence (AAAI) 2020