我该给出多少答案？多答案阅读理解的一项实证研究
计算与语言
2023-06-02 v1
摘要
多答案现象指一个问题可能在文档中分散有多个答案，人类可较好应对，但对机器阅读理解(MRC)系统而言颇具挑战。尽管多答案MRC近期取得进展，仍缺乏关于该现象如何产生及如何更好应对的系统性分析。本文设计了一种分类体系对常见多答案MRC实例归类，据此检视三个多答案数据集并分析多答案挑战的来源。我们进一步分析了当前不同范式的多答案MRC模型处理各类多答案实例的表现。发现部分范式能很好捕捉问题中的关键信息，而其他范式能更好建模问题与上下文间关系。因此我们探索策略以充分发挥不同范式优势。实验表明生成模型可作为融合不同范式的有前景平台。我们的标注与代码已发布以供后续研究。
引用
@article{arxiv.2306.00435,
title = {How Many Answers Should I Give? An Empirical Study of Multi-Answer Reading Comprehension},
author = {Chen Zhang and Jiuheng Lin and Xiao Liu and Yuxuan Lai and Yansong Feng and Dongyan Zhao},
journal= {arXiv preprint arXiv:2306.00435},
year = {2023}
}
备注
Findings of ACL 2023