关于马尔可夫链平稳分布定义的几点注记

马尔可夫链平稳分布有两种不等价的定义: 定义1 设{x(n),n=0,1,2,…}为马氏链,E={0,1,2,…)为状态空间。若对An及i∈E,有 P{X(n)=i}=P{X(o)=i}=P_i 则称{P_i,i∈E}为马氏链的平稳分布。定义2 设{x(n).n=0,1,2,…}为马氏链,E={0,1,2,…}为状态空间,P_(ij)为一步转移概率,{π_i,i∈E}为概率分布。若{π_i,i∈E}满足方程组π_i=sum from j=0 to ∞π_j P_(ji) ,i=0,1,2,…则称{π_i,i∈E}为马氏链的平稳分布。本文通过一系列定理,对这两种定义进行比较,从而看出它们的异同点。

Some Notes on the Definitions of the Stationary Distribution of Markov Chains