SCAI-QReCC 面向对话式问答的共享任务
信息检索
2022-01-27 v1 计算与语言
摘要
面向搜索的对话式人工智能（SCAI）是一个成熟的会议平台，定期聚焦于推进对话式搜索领域的近期工作。SCAI'21 作为一个独立的线上活动组织，并设有一个关于对话式问答的共享任务。由于所有参赛团队均针对该任务试验了答案生成模型，我们认定在此设置下答案正确性的评估是主要挑战也是当前的研究空白。除自动评估外，我们进行了两项众包实验以收集答案合理性与忠实性的标注。作为该共享任务的结果，用于评估的原始对话式问答数据集进一步扩充了由参赛系统生成的替代正确答案。
引用
@article{arxiv.2201.11094,
title = {SCAI-QReCC Shared Task on Conversational Question Answering},
author = {Svitlana Vakulenko and Johannes Kiesel and Maik Fröbe},
journal= {arXiv preprint arXiv:2201.11094},
year = {2022}
}
备注
10 pages