中文

SynTQA:通过结合 Text-to-SQL 与端到端 TQA 的协同式表格问答

计算与语言 2024-10-01 v2

摘要

Text-to-SQL 解析和端到端问答(E2E TQA)是表格问答任务的两个主要方法。尽管在多个基准测试上取得了成功,但它们尚未被相互比较,且二者的协同作用仍有待探索。在本文中,我们通过在最先进的模型和基准数据集上进行评估,识别了它们各自的优势与不足:Text-to-SQL 在处理涉及算术运算和长表格的问题上表现出色;E2E TQA 则在处理模糊问题、非标准表格模式以及复杂表格内容方面更具优势。为了结合两者的优势,我们提出了一种协同式表格问答方法,通过答案选择来整合不同的模型,该方法对任何模型类型都是通用的。进一步的实验验证了通过基于特征或基于 LLM 的答案选择器来集成模型,能够显著提升相较于单个模型的性能。

关键词

引用

@article{arxiv.2409.16682,
  title  = {SynTQA: Synergistic Table-based Question Answering via Mixture of Text-to-SQL and E2E TQA},
  author = {Siyue Zhang and Anh Tuan Luu and Chen Zhao},
  journal= {arXiv preprint arXiv:2409.16682},
  year   = {2024}
}

备注

EMNLP 2024