开放域对话式问答的强效且高效基线
计算与语言
2023-10-24 v1
摘要
与开放域问答(ODQA)设定不同,对话式开放域问答(ODConvQA)领域在针对效率与效果重新评估基线方面受到的关注有限。本文研究了当前最优(SotA)的稠密段落检索(DPR)检索器与解码器融合(FiD)阅读器流水线,并指出由于多种局限性,其在应用于 ODConvQA 任务时表现显著不佳。随后,我们提出并评估了强效但简单且高效的基线,方法是在检索器与阅读器之间引入一个快速重排序组件,并执行有针对性的微调步骤。在 TopiOCQA 与 OR-QuAC 两个 ODConvQA 任务上的实验表明,我们的方法在提升 SotA 结果的同时,将阅读器延迟降低了 60%。最后,我们为构建具有挑战性的基线提供了新颖且有价值的见解,这些基线可作为未来更复杂方法(包括那些利用大语言模型(LLM)的方法)的参考。
引用
@article{arxiv.2310.14708,
title = {Strong and Efficient Baselines for Open Domain Conversational Question Answering},
author = {Andrei C. Coman and Gianni Barlacchi and Adrià de Gispert},
journal= {arXiv preprint arXiv:2310.14708},
year = {2023}
}
备注
Accepted to EMNLP 2023 Findings