中文

构建路径:面向信息检索的鲁棒查询重写方法

计算与语言 2024-08-27 v2

摘要

查询重写旨在生成新的查询,以补充原始查询以提高信息检索系统的性能。最近的查询重写研究,如 query2doc、query2expand 和 query2cot,依赖于大型语言模型(LLM)内部知识生成相关段落以添加信息。然而,这些方法在所需知识未包含在模型内在参数中时效果显著下降。在本文中,我们提出了一种名为 "构建路径"(Crafting the Path)的新型结构化查询重写方法,专为检索系统设计。构建路径包括三个步骤:查询概念理解、查询类型识别和预期答案提取。实验结果表明,我们的方法在查询重写方面优于先前方法,尤其在大型语言模型不熟悉的领域效果更佳。我们演示了该方法对模型内部参数知识的依赖性较低,生成的查询事实错误更少。此外,我们观察到该方法在检索增强生成场景中表现出色。

关键词

引用

@article{arxiv.2407.12529,
  title  = {Crafting the Path: Robust Query Rewriting for Information Retrieval},
  author = {Ingeol Baek and Jimin Lee and Joonho Yang and Hwanhee Lee},
  journal= {arXiv preprint arXiv:2407.12529},
  year   = {2024}
}

备注

3 figures, 13 tables