中文

具有切换成本的赌博机问题更优的双世界最优界

机器学习 2022-11-03 v2

摘要

我们研究具有切换成本的赌博机(bandits)的双世界(best-of-both-worlds)算法,该问题最近由 Rouyer、Seldin 和 Cesa-Bianchi 于 2021 年提出。我们引入了一种出奇简单且有效的算法,该算法同时在无意识对抗设置下实现了 O(T2/3)\mathcal{O}(T^{2/3}) 的极小极大最优后悔界,并在随机约束机制下实现了 O(min{log(T)/Δ2,T2/3})\mathcal{O}(\min\{\log (T)/\Delta^2,T^{2/3}\}) 的界,两者均考虑(单位)切换成本,其中 Δ\Delta 为臂间差距。在随机约束情形下,我们的界改进了 Rouyer 等人先前取得的 O(T1/3/Δ)\mathcal{O}(T^{1/3}/\Delta) 后悔结果。我们辅以一个下界证明:一般而言,对于具有 O(T2/3)\mathcal{O}(T^{2/3}) 最坏情况后悔的算法,在随机约束情形下 Ω~(min{1/Δ2,T2/3})\tilde{\Omega}(\min\{1/\Delta^2,T^{2/3}\}) 的后悔不可避免。

关键词

引用

@article{arxiv.2206.03098,
  title  = {Better Best of Both Worlds Bounds for Bandits with Switching Costs},
  author = {Idan Amir and Guy Azov and Tomer Koren and Roi Livni},
  journal= {arXiv preprint arXiv:2206.03098},
  year   = {2022}
}