有限状态 Markov 过程概率的 Langevin 动力学
概率论
2024-09-20 v4 最优化与控制
摘要
我们研究概率单纯形集上具有有限状态 Wasserstein 度量的梯度漂移-扩散过程,即有限状态 Wasserstein 公共噪声。一个事实是,有限可逆 Markov 过程的 Kolmogorov 转移方程满足有限状态 Wasserstein 空间中熵的梯度流。本文提出用 Wasserstein 公共噪声扰动有限状态 Markov 过程。由此,我们引入一类随机可逆 Markov 过程。我们还为所提随机 Markov 过程定义了随机转移率矩阵,即 Wasserstein Q-矩阵。随后我们导出概率单纯形中的泛函 Fokker-Planck 方程,其平稳分布是单纯形集中熵泛函的 Gibbs 分布。给出了两点状态空间上 Wasserstein 漂移-扩散过程的若干例子。
引用
@article{arxiv.2307.00678,
title = {Langevin dynamics for the probability of finite state Markov processes},
author = {Wuchen Li},
journal= {arXiv preprint arXiv:2307.00678},
year = {2024}
}
备注
Correct some typos and notations