中文

线性bandit的集成采样:小规模集成已足够

机器学习 2025-01-16 v4 机器学习

摘要

我们针对随机线性bandit设定,首次给出有用且严格的集成采样分析。具体而言,在标准假设下,对于交互时域为 TTdd 维随机线性bandit,使用规模为 dlogTd \log T 量级的集成进行集成采样,其累积遗憾至多为 (dlogT)5/2T(d \log T)^{5/2} \sqrt{T} 量级。我们的结果是任何结构化设定下的首个不要求集成规模随 TT 线性增长(这有违集成采样的初衷)同时获得近 T\smash{\sqrt{T}} 量级遗憾的结果。我们的结果也是首个允许无限动作集的。

关键词

引用

@article{arxiv.2311.08376,
  title  = {Ensemble sampling for linear bandits: small ensembles suffice},
  author = {David Janz and Alexander E. Litvak and Csaba Szepesvári},
  journal= {arXiv preprint arXiv:2311.08376},
  year   = {2025}
}