利用贝叶斯划分方法检测凶杀案登记中的重复记录
应用统计
2015-02-04 v2 统计方法学
摘要
在凶杀案登记中发现重复记录是保持致命暴力统计准确性的关键步骤。当缺乏个人的唯一标识符时,这项任务并非微不足道;而当记录存在错误和缺失值时,挑战尤为严峻。传统的重复检测方法对每对记录的核心ference 状态输出独立的决策,这往往导致非传递性决策,必须以某种临时方式进行协调。在数据文件中查找重复记录的任务可以替代地表述为将数据文件划分为核心ference 记录组。我们提出了一种方法,将该文件的划分作为感兴趣参数,从而确保决策的传递性。我们的贝叶斯实现允许我们纳入关于数据文件中字段可靠性的先验信息,这在缺乏训练数据时尤为有用,同时也为重复检测决策提供了恰当的 Uncertainty 评估。我们展示了一项研究,旨在检测向联合国萨尔瓦多真相委员会多次报告的杀戮事件。
引用
@article{arxiv.1407.8219,
title = {Detecting duplicates in a homicide registry using a Bayesian partitioning approach},
author = {Mauricio Sadinle},
journal= {arXiv preprint arXiv:1407.8219},
year = {2015}
}
备注
Published in at http://dx.doi.org/10.1214/14-AOAS779 the Annals of Applied Statistics (http://www.imstat.org/aoas/) by the Institute of Mathematical Statistics (http://www.imstat.org)