视觉信息引导的零样本复述生成
计算与语言
2022-09-23 v2 人工智能
摘要
由于大规模高质量复述语料有限，零样本复述生成已引起广泛关注。回译（也称为基于枢轴的方法）是达成该目标的典型方法。若干工作利用不同信息作为“枢轴”，如语言、语义表示等。在本文中，我们探索使用视觉信息（如图像）作为回译的“枢轴”。与流水线式回译方法不同，我们提出仅基于图文对数据训练的视觉信息引导零样本复述生成（ViPG）。该方法联合训练图像描述模型与复述模型，并利用图像描述模型引导复述模型的训练。自动评估与人工评估均表明，我们的模型能生成具有良好相关性、流畅性与多样性的复述，且图像是一种有前景的零样本复述生成枢轴。
引用
@article{arxiv.2201.09107,
title = {Visual Information Guided Zero-Shot Paraphrase Generation},
author = {Zhe Lin and Xiaojun Wan},
journal= {arXiv preprint arXiv:2201.09107},
year = {2022}
}
备注
Accepted By COLING 2022