基于预算分割设计的可靠在线市场实验

在线实验，亦称A/B测试，是科技行业衡量产品影响与制定业务决策的黄金标准。然而，实验的有效性与效用取决于无偏性与充足功效。在双边在线市场中，这两项要求均受质疑。Bernoulli随机化实验是有偏的，因为处理单元通过市场竞争干扰控制单元并违反“稳定单元处理值假设”(SUTVA)。由于市场两侧样本量差异，至少一侧的实验功效常显不足。尽管在线市场对在线经济十分重要且实验在产品改进中扮演关键角色，仍缺乏针对市场实验中偏倚与低功效问题的有效实用方案。本文提出一种在任何买家具有既定预算(可为有限或无限)的市场中均无偏的实验设计以填补此空白。我们证明该设计比文献中所有其他无偏设计功效更高。随后，我们提供可推广的系统架构以将该设计部署至在线市场。最后，我们通过两个真实世界在线市场所运行实验的经验表现证实了我们的发现。