构建路径:面向信息检索的鲁棒查询重写方法
计算与语言
2024-08-27 v2
摘要
查询重写旨在生成新的查询,以补充原始查询以提高信息检索系统的性能。最近的查询重写研究,如 query2doc、query2expand 和 query2cot,依赖于大型语言模型(LLM)内部知识生成相关段落以添加信息。然而,这些方法在所需知识未包含在模型内在参数中时效果显著下降。在本文中,我们提出了一种名为 "构建路径"(Crafting the Path)的新型结构化查询重写方法,专为检索系统设计。构建路径包括三个步骤:查询概念理解、查询类型识别和预期答案提取。实验结果表明,我们的方法在查询重写方面优于先前方法,尤其在大型语言模型不熟悉的领域效果更佳。我们演示了该方法对模型内部参数知识的依赖性较低,生成的查询事实错误更少。此外,我们观察到该方法在检索增强生成场景中表现出色。
引用
@article{arxiv.2407.12529,
title = {Crafting the Path: Robust Query Rewriting for Information Retrieval},
author = {Ingeol Baek and Jimin Lee and Joonho Yang and Hwanhee Lee},
journal= {arXiv preprint arXiv:2407.12529},
year = {2024}
}
备注
3 figures, 13 tables