若干自适应控制问题中有限时域遗憾最小化的优化探索策略
最优化与控制
2022-11-16 v1 系统与控制
系统与控制
摘要
本工作中，我们考虑自适应最小方差与线性二次型控制问题中的遗憾最小化问题。遗憾最小化在文献中已针对这两类自适应控制问题被广泛研究。其中多数工作给出渐近 regime 下遗憾最优速率的结果。在最小方差情形，遗憾的最优渐近速率为 ，其可在无任何额外外部激励下达到。相反，对多数自适应线性二次型问题，为获得 的最优渐近速率，必须添加外部激励。在本文中，我们将通过理论研究与仿真实际表明：当控制时域预先指定时，借助无外部激励或一种称为 immediate 的新型探索方式，可获得更低的遗憾。
引用
@article{arxiv.2211.07949,
title = {Optimal exploration strategies for finite horizon regret minimization in some adaptive control problems},
author = {Kévin Colin and Håkan Hjalmarsson and Xavier Bombois},
journal= {arXiv preprint arXiv:2211.07949},
year = {2022}
}