具有马尔可夫决策过程切换的切换线性系统的策略综合
系统与控制
2020-01-06 v1 系统与控制
摘要
我们研究了一类离散时间切换线性系统的模式切换协议综合，其中模式跳变由马尔可夫决策过程（MDP）控制。为简洁起见，我们称此类系统为 MDP-JLS。MDP 的每个状态对应于切换系统中的一个模式。MDP 中的概率状态转移表示模式转移。我们致力于寻找一种策略，在每个模式下选择切换动作，使得遵循这些动作的切换系统保证稳定。给定 MDP 中的一个策略，所考虑的 MDP-JLS 退化为马尔可夫跳变线性系统（MJLS）。我们考虑均方稳定性和依概率一稳定性。对于均方稳定性，我们利用现有的 MJLS 稳定性条件，提出高效的半定规划公式来寻找 MDP 中的稳定策略。对于依概率一稳定性，我们推导了新的充分条件，并使用线性规划计算稳定策略。我们还将策略综合结果推广到具有不确定模式转移概率的 MDP-JLS。
引用
@article{arxiv.2001.00835,
title = {Policy Synthesis for Switched Linear Systems with Markov Decision Process Switching},
author = {Bo Wu and Murat Cubuktepe and Franck Djeumou and Zhe Xu and Ufuk Topcu},
journal= {arXiv preprint arXiv:2001.00835},
year = {2020}
}
备注
arXiv admin note: text overlap with arXiv:1904.11456