中文

关于有限状态马尔可夫链通过时间的注记

概率论 2014-12-09 v4

摘要

考虑一个具有有限状态 {0,1,...,d}\{0, 1, ..., d\} 的马尔可夫链。我们在以下两种情况下给出了吸收(通过)时间的生成函数(或拉普拉斯变换):(1) 当链从任意状态 ii 开始并在状态 dd 被吸收时,状态 dd 的吸收时间;(2) 假设链是时间可逆且遍历的,当链从平稳分布开始时,任意状态 ii 的通过时间。实例表明,与现有方法相比,该方法更为便捷,特别是我们可以直接计算吸收时间的期望值。

关键词

引用

@article{arxiv.1302.5987,
  title  = {A note on the passage time of finite state Markov chains},
  author = {Wenming Hong and Ke Zhou},
  journal= {arXiv preprint arXiv:1302.5987},
  year   = {2014}
}