自信地评估众包工人
数据库
2014-11-25 v1
摘要
工人质量控制是众包系统的一个关键方面，通常占据众包投入时间和资金的很大比例。在这项工作中，我们设计了为工人错误率估计生成置信区间的技术，从而能够更好地评估工人质量。我们表明，我们的技术能在一系列真实世界数据集上生成正确的置信区间，并通过利用它们驱逐表现不佳的工人以及提供答案准确性的置信区间，展示了其广泛的适用性。
引用
@article{arxiv.1411.6562,
title = {Evaluating the Crowd with Confidence},
author = {Manas Joglekar and Hector Garcia-Molina and Aditya Parameswaran},
journal= {arXiv preprint arXiv:1411.6562},
year = {2014}
}