用于相册摘要与故事讲述的分层注意力 RNN
计算与语言
2017-08-11 v1 人工智能
计算机视觉与模式识别
机器学习
摘要
我们探讨端到端视觉故事讲述问题。给定一本相册，我们的模型首先选择最具代表性的（摘要）照片，然后为该相册编写一段自然语言故事。针对此任务，我们利用 Visual Storytelling 数据集以及一个由三个分层注意力循环神经网络（RNN）组成的模型来：对相册照片进行编码、选择代表性（摘要）照片以及编写故事。自动评估和人工评估表明，我们的模型在选择、生成和检索方面均取得了优于基线的性能。
引用
@article{arxiv.1708.02977,
title = {Hierarchically-Attentive RNN for Album Summarization and Storytelling},
author = {Licheng Yu and Mohit Bansal and Tamara L. Berg},
journal= {arXiv preprint arXiv:1708.02977},
year = {2017}
}
备注
To appear at EMNLP-2017 (7 pages)