WSDM Cup 2017 维基数据破坏检测任务概述
信息检索
2017-12-19 v1
摘要
我们报告了 WSDM Cup 2017 的维基数据破坏检测任务。该任务收到了五份提交,本文描述了它们的评估以及与最先进基线的比较。与以往工作不同,我们将维基数据破坏检测重新定义为一个在线学习问题,要求参与者软件在近实时条件下预测破坏行为。性能最佳的方法在 PR-AUC 为 0.458 时达到了 0.947 的 ROC-AUC。特别地,该任务被组织为软件提交任务:为了最大化可复现性并推动该任务的未来研究与开发,参与者被要求将其可运行软件提交至 TIRA 实验平台,并附带开源发布的源代码。
引用
@article{arxiv.1712.05956,
title = {Overview of the Wikidata Vandalism Detection Task at WSDM Cup 2017},
author = {Stefan Heindorf and Martin Potthast and Gregor Engels and Benno Stein},
journal= {arXiv preprint arXiv:1712.05956},
year = {2017}
}
备注
Overview of the Wikidata Vandalism Detection Task at WSDM Cup 2017