具有精确误差传播的广义贝叶斯记录链接与回归
统计方法学
2018-10-12 v1
摘要
记录链接(去重或实体解析)是合并含噪数据库以去除重复实体的过程。虽然记录链接从这些数据库中移除了重复实体,但下游任务是对链接数据进行的任何推断、预测或链接后任务。下游任务的一个目标是获得更大的参考数据集,从而能够进行更精确的统计分析。此外,固有的记录链接不确定性会传递给下游任务。受上述动机启发,我们提出一种广义贝叶斯记录链接方法,并将多元回归分析作为下游任务。记录通过随机划分模型进行链接,该模型允许考虑广泛的一类。此外,我们联合建模记录链接与下游任务,从而能够精确地考虑记录链接不确定性。而且,能够生成从所提出的贝叶斯记录链接模型到下游任务的信息反馈传播机制。这种反馈效应对于消除可能损害所得下游任务的潜在偏差至关重要。我们将我们的方法应用于多元线性回归,并经验性地说明“反馈效应”能够改善记录链接的性能。
引用
@article{arxiv.1810.04808,
title = {Generalized Bayesian Record Linkage and Regression with Exact Error Propagation},
author = {Rebecca C. Steorts and Andrea Tancredi and Brunero Liseo},
journal= {arXiv preprint arXiv:1810.04808},
year = {2018}
}
备注
18 pages, 5 figures