ConvAI3：为开放域对话系统生成澄清问题（ClariQ）
计算与语言
2020-09-25 v1 信息检索
摘要
本文档详细描述了面向对话系统的澄清问题挑战赛（ClariQ）。该挑战赛作为 2020 年搜索导向对话式 AI（SCAI）EMNLP 研讨会中对话式 AI 挑战系列（ConvAI3）的一部分组织。对话系统的主要目标是针对用户请求返回恰当的回答。然而，某些用户请求可能存在歧义。在信息检索（IR）场景中，此类情况主要通过搜索结果页面的多样化来处理。但在带宽有限的对话场景中则更具挑战性。因此，在本挑战赛中，我们提供一个通用评估框架以评估混合主动对话。参与者被要求在对信息寻求对话中的澄清问题进行排序。该挑战赛分两个阶段组织，其中阶段 1 在离线设置与单轮对话中评估提交结果。阶段 1 的优胜参与者将有机会使其模型由人工标注者测试。
引用
@article{arxiv.2009.11352,
title = {ConvAI3: Generating Clarifying Questions for Open-Domain Dialogue Systems (ClariQ)},
author = {Mohammad Aliannejadi and Julia Kiseleva and Aleksandr Chuklin and Jeff Dalton and Mikhail Burtsev},
journal= {arXiv preprint arXiv:2009.11352},
year = {2020}
}