迈向可信重排序：一种简单有效的弃权机制
信息检索
2024-09-26 v5 计算与语言
摘要
神经信息检索 (NIR) 显著改进了基于启发式的信检 (IR) 系统。然而，失败仍然频繁，所使用的模型往往无法检索到与用户查询相关的文档。我们通过提出一种专为现实世界约束量身定制的轻量级弃权机制来应对这一挑战，特别强调重排序阶段。我们引入了一种在黑盒场景（通常出现在依赖 API 服务时）中评估弃权策略的协议，证明了其有效性，并提出了一种简单而有效的数据驱动机制。我们提供了用于实验复现和弃权实现的开源代码，以促进在多样化环境中的广泛采用和应用。
引用
@article{arxiv.2402.12997,
title = {Towards Trustworthy Reranking: A Simple yet Effective Abstention Mechanism},
author = {Hippolyte Gisserot-Boukhlef and Manuel Faysse and Emmanuel Malherbe and Céline Hudelot and Pierre Colombo},
journal= {arXiv preprint arXiv:2402.12997},
year = {2024}
}