众包与传统招募方法在硬件差异上的评估
人机交互
2023-06-19 v1
摘要
在线收集研究数据最常用的方法是众包，且其使用持续快速增长。本报告首次考察研究者在部署至 Amazon Mechanical Turk (MTurk) 时是否也须预期显著的硬件性能差异。通过从 Amazon Mechanical Turk (MTurk) 与一种传统招募方法（即滚雪球抽样）收集基础硬件参数（操作系统、GPU 与所用浏览器）进行评估。报告给出了众包参与者（MTurk）与滚雪球招募之间显著的硬件差异，并包含用于评估 3D 网络应用硬件性能的相关描述性统计。报告建议，若所设计的实验应用需要密集图形计算并依赖 MTurk 与更成熟的招募策略（即滚雪球抽样）之间一致的用户体验，则须考虑硬件差异以获得有效结果。
引用
@article{arxiv.2306.09913,
title = {Evaluating hardware differences for crowdsourcing and traditional recruiting methods},
author = {Paul-David Joshua Zuercher},
journal= {arXiv preprint arXiv:2306.09913},
year = {2023}
}