基于点过程的辅助技术审阅停止方法
信息检索
2023-11-16 v1
摘要
技术辅助审阅（TAR）旨在减少筛选文档集合相关性所需的工作量，被用于开发医学证据的系统综述以及识别须因法律程序而披露的文件。停止方法是在 TAR 过程中决定何时停止筛选文档的算法，有助于确保工作负载最小化同时仍实现高召回水平。本文提出一种基于点过程的新型停止方法，点过程是可用于表示随机事件发生的统计模型。该方法使用率函数对排序中相关文档的出现建模，并比较四种候选函数，包括一种此前未用于此目的的函数（双曲）。评估使用标准数据集（CLEF e-Health、TREC Total Recall、TREC Legal）进行，且本工作是首个通过报告一系列不同有效性排序上的性能来探索停止方法鲁棒性的研究。结果表明，所提方法在多数情况下以不需审阅过多文档的数量实现了期望的召回水平，并且与多种替代方法相比也表现良好。
引用
@article{arxiv.2311.08597,
title = {Stopping Methods for Technology Assisted Reviews based on Point Processes},
author = {Mark Stevenson and Reem Bin-Hezam},
journal= {arXiv preprint arXiv:2311.08597},
year = {2023}
}
备注
Accepted by ACM Transactions on Information Systems (TOIS)