概率统己推和随机过程课件十马尔可夫链.pptVIP

四.平稳分布 如果一维分布 与 无关, 那么据 定义4 对于齐次马尔可夫链 如果 存在概率分布 满足 (13.12) 则称 为平稳分布,称 具有平稳性, 是平稳齐次马尔可夫链. (13.10) 作如下定义： * 改写成向量:平稳分布律要满足 定理： 如果齐次马尔可夫链 的初 始分布 是一个平稳 分布,则 并且有 * 改写成向量:平稳分布律要满足 定理： 如果齐次马尔可夫链 的初 始分布 是一个平稳 分布,则 并且有 * 例8 带一个反射壁的一维随机游动,以 表示 在时刻 粒子处于 状态,状态空间 转移概率 求平稳分布 * 并且有 * 作业 十三章： 6，7 ， 8 * * * 第十三章 马尔可夫链 马尔可夫过程是一类特殊的随机过程, 最初是由俄国数学家马尔可夫1896年 生物学,经济,管理,教育,气象物理,化学等等. 马尔可夫链 是离散状态的马尔可夫过程, 提出和研究的应用十分广泛