随机过程第五章马尔沁夫过程.pptVIP

由一步转移矩阵知： ∴ 若q，则得 若 ， 则得 （j = 1,2,3） 例5 验证转移概率矩阵 的马氏链，其遍历性是否成立。 解 由于 ∴ 显然， 中的元素不满足 ， ∴ 该马链遍历性不成立。 习题 1. 设岩性这个随机变量只能取砂岩（用代表）、灰岩（用代表）两种状态，对于某地层剖面观测记录的一次实现为 ，试写出它的转移概率矩阵。 2. 设有四个状态 的马氏链，它的一步转移概率矩阵为 试画出其状态传递图。 3. 设有一马尔可夫链，其转移状态有两种： 、 经计算得一阶转移概率矩阵为 求证该链具有遍历性，并求出极限分布。 4. 设有四个状态的马氏链，它的一步转移概率矩阵为 试画出它的状态传递图。 第五章 马