连续时间受控马尔可夫系统的最小命中概率
最优化与控制
2024-08-08 v1
摘要
本文聚焦于具有可数状态和有限可采取动作空间的连续时间受控马尔可夫系统 (CTCMSs) 的最小命中概率。首先证明了最优政策的存在性。特别地，对于受控分支过程 (CBP) 的一种特殊且重要的情况，证明了最小命中概率是改进最优方程组唯一解。此外，本文提出一种新颖且精确的改进政策迭代算法，用于求解最优政策和最小命中概率（最小灭绝概率）。
引用
@article{arxiv.2408.03645,
title = {The minimal hitting probability of continuous-time controlled Markov systems with countable states},
author = {Yanyun Li and Junping Li},
journal= {arXiv preprint arXiv:2408.03645},
year = {2024}
}