“定理以Markov 链和平稳分布为对象,是依赖样本版本的大数律。不可约性与正常返性保证时间平均的标准结论。MCMC 用轨道平均估计期望,而混合时间回答有限步边缘分布距离稳态还有多远,两者不能…”
形式陈述 ​
本页讨论有限或可数状态空间上的齐次 Markov 链,转移矩阵为
则称
集合
直觉 ​
忽略概率的具体大小,只保留哪些一步转移具有正概率,就得到一张有向图。沟通类正是这张支撑图的强连通分量;闭类则是没有指向外部边的汇分量。概率值决定长期停留与返回的频率,正支撑先决定哪些区域在路径上根本能够互达。
不可约性的含义是链没有彼此隔绝的概率世界:无论从哪里开始,每个状态最终都有机会被访问。它只说“存在正概率路径”,不说到达很快、返回期望有限或分布会收敛。把这些结论一起塞进“遍历”一词会掩盖不可约、常返和非周期三个不同层次。
例子与边界 ​
考虑状态
一步概率
推论与应用 ​
沟通类分解是分析长期行为的第一步。每个闭类都可拥有自身的平稳分布;从暂态区域出发的质量会流向一个或多个闭类。类内状态共享常返性与周期,后续由常返、暂留与周期性精细分类。
有限不可约且非周期的链才进入标准混合时间框架。实际建模时,先检查支撑图往往比先求特征值更高效:若链已经分裂成多个闭类,从最坏初态收敛到同一个平稳分布便不可能发生。
参考资料
- David A. Levin, Yuval Peres, and Elizabeth L. Wilmer, Markov Chains and Mixing Times, 2nd ed., American Mathematical Society, 2017,Ch. 1, irreducibility and communication classes。
- J. R. Norris, Markov Chains, Cambridge University Press, 1997,§1.2, communicating classes and closed classes。