配对、幅度还是星级：大众评分的最佳方式是什么？
信息检索
2016-09-05 v1 人机交互
摘要
我们比较了三种流行的内容评分技术：无处不在的五星评分、较少使用的配对比较，以及最近（在众包中）引入的幅度估计方法。在所需的用户工作量、可达到的用户偏好预测准确性以及所需的评分数量方面，每种系统都有其特定的优缺点。我们设计了一项实验，以无偏见的方式对这三种技术进行比较。我们在一个流行的众包平台上收集了 39,000 条评分，这使得我们能够发布一个数据集，该数据集将对许多关于用户评分技术的相关研究有所助益。
引用
@article{arxiv.1609.00683,
title = {Pairwise, Magnitude, or Stars: What's the Best Way for Crowds to Rate?},
author = {Alessandro Checco and Gianluca Demartini},
journal= {arXiv preprint arXiv:1609.00683},
year = {2016}
}