三全其美：数字营销实践中的自适应实验
机器学习
2024-09-19 v3 统计方法学
摘要
自适应实验设计（Adaptive Experimental Design, AED）方法正日益被业界用作一种工具，以提高测试吞吐量或降低相对于传统 A/B/N 测试方法的实验成本。然而，除了理想的平稳设置外，此类方法的行为和保证尚未被充分理解。本文分享了在非平稳性普遍存在的工业环境中朴素使用 AED 系统所面临的挑战的经验教训，同时也提供了关于此类环境中适当目标和系统规范的视角。基于这些经验，我们开发了一个用于反事实推断的 AED 框架，并在商业环境中进行了测试。
引用
@article{arxiv.2402.10870,
title = {Best of Three Worlds: Adaptive Experimentation for Digital Marketing in Practice},
author = {Tanner Fiez and Houssam Nassif and Yu-Cheng Chen and Sergio Gamez and Lalit Jain},
journal= {arXiv preprint arXiv:2402.10870},
year = {2024}
}