在 Prolific 上招募软件工程用户研究参与者：一份经验报告
软件工程
2022-03-16 v2 人机交互
摘要
诸如 Prolific 之类的在线参与者招募平台在研究界日益流行，因为它们使研究者能够轻松获取大量参与者。然而，参与者质量可能成为问题；参与者可能提供不实信息以获取更多研究机会，从而为结果增添不必要的噪声。本文详述了我们为一项需要 Node.js 编程技能的用户研究从 Prolific 招募参与者的经验，旨在帮助其他研究者开展类似研究。我们探索了一种利用预筛选验证、注意力检查以及一系列编程知识问题来招募程序员参与者的方法。我们收到了 680 份回复，并确定其中 55 份符合受邀参加用户研究的标准。最终我们通过视频通话与 10 名参与者进行了用户研究环节。我们在本文结尾给出了一系列面向研究者的建议。
引用
@article{arxiv.2201.05348,
title = {Software Engineering User Study Recruitment on Prolific: An Experience Report},
author = {Brittany Reid and Markus Wagner and Marcelo d'Amorim and Christoph Treude},
journal= {arXiv preprint arXiv:2201.05348},
year = {2022}
}
备注
To appear at RoPES 2022