基于循环神经网络的新闻标题生成
计算与语言
2015-12-08 v1 机器学习
神经与进化计算
摘要
我们描述了一种带有LSTM单元和注意力机制的编码-解码循环神经网络在从新闻文章文本生成标题中的应用。我们发现该模型在简明地改写新闻文章方面相当有效。此外,我们研究了神经网络如何决定关注哪些输入词,特别是我们在一个简化的注意力机制中识别了不同神经元的功能。有趣的是,我们的简化注意力机制在留出文章集上的表现优于更复杂的注意力机制。
引用
@article{arxiv.1512.01712,
title = {Generating News Headlines with Recurrent Neural Networks},
author = {Konstantin Lopyrev},
journal= {arXiv preprint arXiv:1512.01712},
year = {2015}
}