双边市场实验中的干扰、偏差与方差:给平台的指导
统计方法学
2021-04-27 v1 计量经济学
摘要
双边市场平台通常会在全平台推出某项干预之前运行实验以检验其效果。一种典型方法是把个体随机分为接受干预的处理组和不接受干预的控制组。平台随后比较两组的表现,以估计若向所有人推出该干预所产生的效应。我们关注两类常见实验,即平台在供给侧或需求侧对个体进行随机化。这些实验中处理效应的估计通常有偏:由于市场中的个体相互竞争,处理组个体会影响控制组个体,反之亦然,从而产生干扰。我们建立了一个简单的易处理市场模型,以研究存在干扰的这些实验中的偏差与方差。我们关注平台可用的两种选择:(1)应在平台的哪一侧进行随机化(供给或需求)?(2)应将多大比例的个体分配至处理组?我们发现两种选择均以不同方式影响所得估计量的偏差与方差。实验类型的偏差最优选择取决于市场中供给与需求的相对数量,我们讨论了平台如何利用市场数据来选择实验类型。重要的是,我们发现许多情况下,选择偏差最优的实验类型对方差影响甚微。另一方面,处理比例的选择会引发偏差—方差权衡,其中使偏差最小的比例会增加方差。我们讨论了平台如何借助建模以及对市场、干预风险与干预合理效应大小的环境知识相结合,来应对此权衡并最优选择处理比例。
引用
@article{arxiv.2104.12222,
title = {Interference, Bias, and Variance in Two-Sided Marketplace Experimentation: Guidance for Platforms},
author = {Hannah Li and Geng Zhao and Ramesh Johari and Gabriel Y. Weintraub},
journal= {arXiv preprint arXiv:2104.12222},
year = {2021}
}