MarkQA：一个带数值推理的大规模KBQA数据集
计算与语言
2023-12-15 v2
摘要
尽管基于知识库的问答(KBQA)在处理事实型问题方面已取得进展，带数值推理的KBQA仍相对未被充分探索。本文关注KBQA中的复杂数值推理，并提出一项新任务NR-KBQA，其需要同时具备多跳推理与数值推理能力。我们设计了一种称为PyQL的Python格式逻辑形式来表示数值推理问题的推理过程。为促进NR-KBQA的发展，我们提出一个称为MarkQA的大规模数据集，其由一小组种子自动构建而成。MarkQA中每个问题都配有相应的SPARQL查询，以及QDMR格式与PyQL程序中的逐步推理过程。一些最先进QA方法在MarkQA上的实验结果表明，KBQA中的复杂数值推理面临巨大挑战。
引用
@article{arxiv.2310.15517,
title = {MarkQA: A large scale KBQA dataset with numerical reasoning},
author = {Xiang Huang and Sitao Cheng and Yuheng Bao and Shanshan Huang and Yuzhong Qu},
journal= {arXiv preprint arXiv:2310.15517},
year = {2023}
}
备注
EMNLP 2023 main conference. Code: https://github.com/cdhx/MarkQA Homepage: http://ws.nju.edu.cn/MarkQA