极其简单的真相发现方法
人工智能
2022-12-06 v4 多智能体系统
摘要
真相发现是一类广泛统计方法的统称,旨在基于来自噪声源的多个答案提取问题的正确答案,例如众包平台中的工人。本文考虑一种极简的启发式方法,利用与其他工人的平均接近度来估计工人的能力。我们证明该估计能很好地反映实际能力水平,并能够在广泛的领域和统计模型中区分高质量与低质量工人。在高斯噪声下,这一简单估计是带常数正则化因子的 MLE 的唯一解。最后,在众包场景中按平均接近度对工人加权,相较于无加权聚合及其他真相发现算法,在实践中取得了显著提升。
引用
@article{arxiv.1905.00629,
title = {Frustratingly Easy Truth Discovery},
author = {Reshef Meir and Ofra Amir and Omer Ben-Porat and Tsviel Ben-Shabat and Gal Cohensius and Lirong Xia},
journal= {arXiv preprint arXiv:1905.00629},
year = {2022}
}
备注
Full version of a paper accepted to AAAI'23