Booking.com 在线实验中的中介分析:解耦直接与间接效应
人机交互
2018-10-31 v1
摘要
在线实验是 Booking.com 以客户为中心的产品开发的核心。虽然随机对照试验是估计产品变更对业务指标总体效应的有力工具,但它们往往难以解释变更的机制。当决策依赖于能够区分处理对某个结果变量的直接效应与经由中介变量的间接效应时,这就成了问题。在本文中,我们论证了在线实验中中介分析的需求,并使用模拟数据展示这些方法如何帮助识别并估计直接因果效应。未能考虑所有混杂因素可能导致有偏估计,因此我们纳入敏感性分析以帮助衡量估计对缺失因果因素的稳健性。
引用
@article{arxiv.1810.12718,
title = {Mediation Analysis in Online Experiments at Booking.com: Disentangling Direct and Indirect Effects},
author = {Bahattin Tolga Öztan and Zoé van Havre and Caio Gomes and Lukas Vermeer},
journal= {arXiv preprint arXiv:1810.12718},
year = {2018}
}
备注
Presented at the 2018 Conference on Digital Experimentation (CODE@MIT)