关键词无后效性马尔可夫性齐次马尔夫链n步转移.pptVIP

* * §3 遍历性 * * * * * * * * * * 例6：一质点在1,2,3三个点上作随机游动，1和3是 两个反射壁，当质点处于2时，下一时刻处于1,2,3 是等可能的。写出一步转移概率矩阵，判断此链是 否具有遍历性，若有，求出极限分布。 * 例7：一质点在1,2,3三个点上作随机游动，1和3是 两个反射壁，当质点处于2时，下一时刻转移到1和3 的概率各为?。写出一步转移概率矩阵，判断此链是 否具有遍历性，若有，求出极限分布。 * 例8：一质点在1,2,3三个点上作随机游动，1和3是两个 吸收壁，当质点处于2时，下一时刻转移到1和3的 概率各为?。写出一步转移概率矩阵，判断此链是 否具有遍历性? 若有，求出极限分布。 平稳分布的意义 * 例9：设有6个球(2个红球,4个白球)随机平分放入甲, 乙两个盒中.今每次从两盒中各任取一球并进行交换. 表示开始时甲盒中的红球数,Xn(n0)表示经n次交换 后甲盒中的红球数. (1)求此马氏链的初始分布; (2)求一步转移概率矩阵; (3)计算 ; (4)判断此链是否具有遍历性，若有，求出极限分布。 * * 关键词： 无后效性(马尔可夫性) 齐次马尔可夫链 n步