随机过程18(4.3) 状态空间的分解演示教学.ppt

3. 状态空间的分解;定义;引理7 (有关闭集的判定和性质);;引理8;定理7;;定理 8;定理 9;引理10;定理10 (周期链分解定理);证明 (1) 分解式的存在性;(3) 分解式的唯一性;;定理11;;;;例1 设状态空间S={0,1,2}的马尔可夫链,它的一步 转移概率矩阵为;例2 设状态空间S={1,2,3,4}的马尔可夫链,它的一步 转移概率矩阵为;1;例3 设{Xn,n=0,1,2,…}是一齐次马尔可夫链, 状态空间 S={1,2,3,4,5},其一步转移概率矩阵为;1;例4 设齐次马尔可夫链的状态空间S={0,1,2,3,},其一步 转移概率矩阵为;1;例5 设齐次马尔可夫链的状态空间S={1,2,3,4,5,6,7,8}, 其一步转移概率矩阵为;1;例5 设齐次马尔可夫链的状态空间S={1,2,3,4,5,6,}, 其一步转移概率矩阵为;1