Spacerini：基于 Pyserini 与 Hugging Face 的即插即用搜索引擎
信息检索
2024-03-26 v2 计算与语言
摘要
我们提出 Spacerini，一个将可复现信息检索研究工具包 Pyserini 与 Hugging Face 相集成以无缝构建和部署交互式搜索引擎的工具。Spacerini 使最先进的稀疏与稠密检索模型对非 IR 从业者更为易用，同时将部署工作量降至最低。这对于希望通过训练语料的定性分析来更好理解与验证其研究的 NLP 研究者、希望展示集成到不断发展的 Pyserini 生态系统中的新检索模型的 IR 研究者，以及复现其他研究者工作的第三方均十分有用。Spacerini 是开源的，包含用于本地与远程加载、预处理、索引和部署搜索引擎的实用工具。我们展示了使用 Spacerini 为不同用例创建的 13 个搜索引擎组合。
引用
@article{arxiv.2302.14534,
title = {Spacerini: Plug-and-play Search Engines with Pyserini and Hugging Face},
author = {Christopher Akiki and Odunayo Ogundepo and Aleksandra Piktus and Xinyu Zhang and Akintunde Oladipo and Jimmy Lin and Martin Potthast},
journal= {arXiv preprint arXiv:2302.14534},
year = {2024}
}