遍历性

马氏链理论的组成部分
在电力运行、机械加工、大规模的劳动组织等生产过程中，常常会遇到这样的情况，即不管系统的初始状态如何，在经历了一段时间以后，系统就会处于统计平衡状态(Statistical Equilibrium)，这种情况就是数学中所谓的遍历性问题，遍历性问题是马氏链理论的一个重要部分。

定义

设
为齐次马氏链
的k步转移概率，如果对一切i,j,存在不依赖于i的极限
则称马氏链
具有遍历性，若
构成一个概率分布，则称该马氏链存在着
极限分布。

遍历定理

定理1