HEAD-QA:面向复杂推理的医疗健康数据集
计算与语言
2019-06-12 v1
摘要
我们提出 HEAD-QA,一个用于推动复杂推理研究的多项选择题问答测试平台。这些题目来自西班牙医疗系统专业岗位招聘考试,即便对高度专业的人类而言也具有挑战性。随后我们考虑了基于信息检索与神经技术的单语(西班牙语)和跨语言(至英语)实验。我们表明:(i) HEAD-QA 对当前方法构成挑战;(ii) 其结果远远落后于人类表现,证明了其作为未来工作基准的有用性。
引用
@article{arxiv.1906.04701,
title = {HEAD-QA: A Healthcare Dataset for Complex Reasoning},
author = {David Vilares and Carlos Gómez-Rodríguez},
journal= {arXiv preprint arXiv:1906.04701},
year = {2019}
}
备注
ACL 2019 (short papers)