激励未知众包群体
机器学习
2021-09-10 v1
摘要
受众包标注中常见的策略性活动启发,我们研究了针对异质且未知众包群体的无验证顺序信息获取(EIWV)问题。我们提出了一种基于强化学习的方法,该方法在包括工人潜在非理性和合谋在内的广泛设定下均有效。借助一个高成本的神谕和推断方法,我们的方法动态决定神谕调用,即使在频繁合谋活动存在的情况下也能获得鲁棒性。大量实验表明了该方法的优势。我们的结果还首次展示了 EIWV 在大规模真实数据集上的全面实验,并首次对环境变量的影响进行了深入研究。
引用
@article{arxiv.2109.04226,
title = {Incentivizing an Unknown Crowd},
author = {Jing Dong and Shuai Li and Baoxiang Wang},
journal= {arXiv preprint arXiv:2109.04226},
year = {2021}
}