随机时间状态依赖漂移准则下马尔可夫链的收敛速率
概率论
2015-04-30 v2 最优化与控制
摘要
网络控制中的许多应用需要控制器间歇性地访问系统,例如事件触发系统或信息受限控制应用。受此类应用的启发并扩展先前关于 Lyapunov 理论漂移准则的工作,我们在状态依赖的随机时间漂移准则下建立了马尔可夫链的次几何和几何收敛速率。我们量化了遍历性速率、Lyapunov 函数的性质、其漂移特性以及停止时间分布之间的关系。最后,我们研究了其在网络控制中的一个应用。
引用
@article{arxiv.1312.4210,
title = {On Rates of Convergence for Markov Chains under Random Time State Dependent Drift Criteria},
author = {Ramiro Zurkowski and Serdar Yüksel and Tamás Linder},
journal= {arXiv preprint arXiv:1312.4210},
year = {2015}
}