线性bandit的集成采样:小规模集成已足够
机器学习
2025-01-16 v4 机器学习
摘要
我们针对随机线性bandit设定,首次给出有用且严格的集成采样分析。具体而言,在标准假设下,对于交互时域为 的 维随机线性bandit,使用规模为 量级的集成进行集成采样,其累积遗憾至多为 量级。我们的结果是任何结构化设定下的首个不要求集成规模随 线性增长(这有违集成采样的初衷)同时获得近 量级遗憾的结果。我们的结果也是首个允许无限动作集的。
引用
@article{arxiv.2311.08376,
title = {Ensemble sampling for linear bandits: small ensembles suffice},
author = {David Janz and Alexander E. Litvak and Csaba Szepesvári},
journal= {arXiv preprint arXiv:2311.08376},
year = {2025}
}