ANTIQUE：一个非事实型问答基准
信息检索
2019-08-20 v2 计算与语言
摘要
考虑到移动与语音搜索的广泛使用，面向非事实型问题的答案段落检索在现代信息检索系统中起着关键作用。尽管该任务重要，社区仍深感缺乏带有真实问题及全面相关性判断的大规模非事实型问答数据集。本文中，我们开发并发布了一个来自多样类别的2,626个开放域非事实型问题集合。该称为ANTIQUE的数据集包含34,011条人工相关性标注。问题由社区问答服务（即Yahoo! Answers）中的真实用户提出。每个问题的所有答案的相关性判断通过众包收集。为促进进一步研究，我们还包含了对数据的简要分析，以及经典与近期开发的神经IR模型上的基线结果。
引用
@article{arxiv.1905.08957,
title = {ANTIQUE: A Non-Factoid Question Answering Benchmark},
author = {Helia Hashemi and Mohammad Aliannejadi and Hamed Zamani and W. Bruce Croft},
journal= {arXiv preprint arXiv:1905.08957},
year = {2019}
}