自适应实验方法比较
统计方法学
2022-07-05 v1 计量经济学
摘要
我们使用仿真研究来比较三种自适应实验方法：Thompson sampling、Tempered Thompson sampling 和 Exploration sampling。我们从社会福利和估计准确度两方面评估每种方法的性能，并将其作为实验波次(wave)数量的函数。我们进一步构建了一组新颖的“混合”损失度量，以识别哪些方法对于追求多种实验目标组合的研究者是最优的。我们的主要结果是：1) Thompson sampling 的相对性能取决于实验波次的数量；2) Tempered Thompson sampling 能够将损失在多个实验目标之间进行独特的分配；3) 在大多数情况下，Exploration sampling 的表现与随机分配相似。
引用
@article{arxiv.2207.00683,
title = {A Comparison of Methods for Adaptive Experimentation},
author = {Samantha Horn and Sabina J. Sloman},
journal= {arXiv preprint arXiv:2207.00683},
year = {2022}
}
备注
Accepted for presentation at ReALML @ ICML2022