让我们聊聊!通过对话式视觉问答生成开启对话
人工智能
2022-05-20 v1 计算与语言
计算机视觉与模式识别
摘要
一个引人入胜且发人深省的问题可以开启一场精彩的对话。在本工作中,我们探索一种新场景:对话智能体查看一组用户的照片(例如来自社交媒体平台),并提出一个引人入胜的问题以与用户开启对话。现有的视觉到问题模型大多生成冗长且显而易见的问题,可能并非理想的对话开场白。本文引入一个两阶段框架,首先为照片集生成视觉故事,然后利用该故事生成有趣的问题。人工评估表明,相较于其他视觉到问题基线,我们的框架能生成更具引发回应能力的对话开启问题。
引用
@article{arxiv.2205.09327,
title = {Let's Talk! Striking Up Conversations via Conversational Visual Question Generation},
author = {Shih-Han Chan and Tsai-Lun Yang and Yun-Wei Chu and Chi-Yang Hsu and Ting-Hao Huang and Yu-Shian Chiu and Lun-Wei Ku},
journal= {arXiv preprint arXiv:2205.09327},
year = {2022}
}
备注
Accepted as a full talk paper on AAAI-DEEPDIAL'21