引证 Needed:维基百科可验证性的分类体系与算法评估
计算机与社会
2019-03-01 v1 计算与语言
数字图书馆
摘要
维基百科在网络上扮演着日益核心的角色,其贡献者在来源引用与事实核查内容时所遵循的政策影响着数百万读者。在这些核心指导原则中,可验证性政策具有特别重要的作用。可验证性要求维基百科条目中的信息须有可靠的二手来源佐证。然而,由于大规模策展与事实核查维基百科需要人工劳动,其内容并非总是均匀符合这些政策。引证(即对外部来源的引用)可能不符合可验证性要求,或可能完全缺失,从而可能削弱这部自由百科全书特定主题领域的可靠性。在本文中,我们旨在对维基百科为遵守自身可验证性指南而引用外部来源的原因与方式提供实证刻画。首先,我们通过收集来自多个语言版维基百科编辑者的标注数据,构建了内联引证所需原因的分类体系。然后,我们收集了一个大规模众包数据集,其中的维基百科句子根据该分类体系进行了类别标注。最后,我们设计并评估了算法模型,以判定某陈述是否需要引证,并基于我们的分类体系预测引证原因。我们评估了此类模型在不同质量等级的维基百科文章类别上的鲁棒性,以及一个用于事实核查标注的额外声明数据集上的表现。
引用
@article{arxiv.1902.11116,
title = {Citation Needed: A Taxonomy and Algorithmic Assessment of Wikipedia's Verifiability},
author = {Miriam Redi and Besnik Fetahu and Jonathan Morgan and Dario Taraborelli},
journal= {arXiv preprint arXiv:1902.11116},
year = {2019}
}