LongEval at CLEF 2025：面向网页与科学数据的信息检索系统的时间序列评估
信息检索
2025-09-23 v1
摘要
LongEval 实验室聚焦于随时间演化的信息检索系统评估。该实验室提供了两个数据集，捕捉着不断演变的搜索情景，包括文档、查询和相关性评估的变更。系统从时间维度进行评估，即评估随数据变化而产生的检索效果。本次第三届 LongEval 包含两个检索任务：一个涉及网页查询检索领域，另一个则聚焦于科学文献检索。我们概述了今年任务和数据集，以及参与系统。全共 19 支团队提交了各自的方法，我们使用 nDCG 以及量化检索效果随时间变化的多种指标对其进行评估。
引用
@article{arxiv.2509.17469,
title = {LongEval at CLEF 2025: Longitudinal Evaluation of IR Systems on Web and Scientific Data},
author = {Matteo Cancellieri and Alaa El-Ebshihy and Tobias Fink and Maik Fröbe and Petra Galuščáková and Gabriela Gonzalez-Saez and Lorraine Goeuriot and David Iommi and Jüri Keller and Petr Knoth and Philippe Mulhem and Florina Piroi and David Pride and Philipp Schaer},
journal= {arXiv preprint arXiv:2509.17469},
year = {2025}
}