INEX背景下的用户与评估者:相关性维度是否相关?
信息检索
2019-05-01 v1
摘要
通过分析并比较以下两种行为,识别出XML检索的主要方面:评估者在判定返回文档组件相关性时的行为;以及用户在与XML文档组件交互时的行为。我们认为INEX的两个相关性维度——穷尽性(Exhaustivity)与专指性(Specificity)——并非正交维度;事实上,对每个维度的实证分析揭示两个维度的等级彼此相关。通过分析评估者与用户之间的一致程度,我们旨在识别最佳的检索单元。我们的分析结果表明,最高的一致性出现在高度相关的文档组件和非相关文档组件上,这意味着INEX 10点相关性量表的端点才被评估者和用户以相同方式感知。我们提出了XML检索中相关性的新定义,并论证其相应的相关性量表对INEX是更好的选择。
引用
@article{arxiv.cs/0507069,
title = {Users and Assessors in the Context of INEX: Are Relevance Dimensions Relevant?},
author = {Jovan Pehcevski and James A. Thom and Anne-Marie Vercoustre},
journal= {arXiv preprint arXiv:cs/0507069},
year = {2019}
}