排序公理对信息检索评价指标的影响
信息检索
2022-07-05 v1
摘要
通过公理化分析研究IR评价指标，能更好地理解其数值性质。一些工作已用公理对检索度量的有效性进行建模，这些公理刻画了文档排序集上期望的性质。本文形式化地探究了这些排序公理对某些IR评价指标数值的影响。聚焦于具有多等级相关性的文档排序列表集合。该集合中的可能序关系源自三种被广泛接受的检索度量排序公理，随后依据其格性质进行分类。当相关文档被优先时，可识别出文档排序的一个子集：并不可约元（join-irreducible elements），其与向量空间中基的概念有某种相似性。任意排序的 precision、recall、RBP 或 DCG 值均可由其在该并不可约元上的值算出。然而当考虑文档交换时则并非如此。
引用
@article{arxiv.2207.01201,
title = {On the Effect of Ranking Axioms on IR Evaluation Metrics},
author = {Fernando Giner},
journal= {arXiv preprint arXiv:2207.01201},
year = {2022}
}
备注
10 pages. Part of proceedings of the 2022 ACM SIGIR International Conference on the Theory of Information Retrieval