MeetUp!：一种视觉环境中的联合活动对话语料库
计算与语言
2019-07-12 v1 计算机视觉与模式识别
摘要
构建能够就其视觉环境进行对话的计算机系统，是人工智能与计算语言学研究中最为悠久的关注点之一（例如，参见 Winograd 1972 年的 SHRDLU 系统）。然而，直到最近，计算机视觉与自然语言处理的方法才变得足够强大，使这一愿景显得更可实现。尤其在计算机视觉发展的推动下，近期已发布许多将语言交互与视觉处理相结合的数据集与采集环境。在此，我们认为这些数据集往往过度简化了对话部分，并提出了一种任务——MeetUp!——该任务需要视觉与对话双重基础，并对话语表征提出了更高要求。MeetUp! 是一款双人协调游戏，玩家在视觉环境中移动，以寻找彼此为目标。为此，他们必须谈论所见之物，并达成相互理解。我们描述了一次数据收集，并表明所得对话确实展现出所关注的对话现象，同时也对语言与视觉方面提出了挑战。
引用
@article{arxiv.1907.05084,
title = {MeetUp! A Corpus of Joint Activity Dialogues in a Visual Environment},
author = {Nikolai Ilinykh and Sina Zarrieß and David Schlangen},
journal= {arXiv preprint arXiv:1907.05084},
year = {2019}
}
备注
In Proceedings of the 23rd Workshop on the Semantics and Pragmatics of Dialogue (semdial / LondonLogue), London, September 2019