调整二元信息检索评估指标以适用于基于片段的检索任务
信息检索
2013-12-09 v1
摘要
本报告描述了基于现有二元信息检索指标来评估基于片段的检索有效性的指标。这些指标是在视频片段超链接任务的背景下进行描述的。这种评估方法复用了标准 Cranfield 评估范式中的现有评估度量。我们的调整方法原则上可用于任何使用二元相关性的有效性度量,以及其他基于片段的检索任务。在我们的视频超链接设置中,我们使用了截断秩 n 处的精确率(precision at a cut-off rank n)和平均精确率均值(mean average precision)。
引用
@article{arxiv.1312.1913,
title = {Adapting Binary Information Retrieval Evaluation Metrics for Segment-based Retrieval Tasks},
author = {Robin Aly and Maria Eskevich and Roeland Ordelman and Gareth J. F. Jones},
journal= {arXiv preprint arXiv:1312.1913},
year = {2013}
}
备注
Explanation of evaluation measures for the linking task of the MediaEval Workshop 2013