Rally 与 WebScience：面向基于浏览器的技术与社会问题研究平台与工具包
计算机与社会
2022-12-01 v2
摘要
实证技术与社会研究正处于方法论危机之中。问题日益涉及封闭平台、定向内容和特定情境行为。主流研究方法，如调查、任务和网页爬取，存在生态效度与设计上的局限。在参与者浏览器和设备中部署研究是一个有前景的方向。这些观测点可观察个性化体验并在真实环境中实施 UI 干预。我们调研了使用这些方法的学术文献，标注了 284 篇抽样论文。我们的分析展示了其潜力，但也揭示了反复出现的实现障碍与不足。随后我们提出 Rally 和 sdkName，一个用于基于浏览器研究的平台与工具包。这些系统降低了实现障碍并推进了在线行为测量的科学。最后，我们根据设计目标评估 Rally 和 sdkName。我们报告了一项为期一个月的新闻参与度试点研究结果，分析了来自 1,817 名参与者的 4,466,200 次网页访问。我们还展示了使用这些系统的研究人员的访谈观察。
引用
@article{arxiv.2211.02274,
title = {Rally and WebScience: A Platform and Toolkit for Browser-Based Research on Technology and Society Problems},
author = {Anne Kohlbrenner and Ben Kaiser and Kartikeya Kandula and Rebecca Weiss and Jonathan Mayer and Ted Han and Robert Helmer},
journal= {arXiv preprint arXiv:2211.02274},
year = {2022}
}