《第五章马尔可夫过程-》-公开·课件.pptVIP

* * 5 马尔可夫过程 马尔可夫过程的概念 离散参数马尔可夫链 连续参数马尔可夫链 生灭过程及应用 5 马尔可夫过程 有限维概率分布(簇) 转移概率 绝对概率 极限分布 平稳分布 √ 状态空间的性质 5.2.4 马尔可夫链的状态分类 一些基本状态类型、概率性质及其关系 状态空间的分解 极限特性与平稳分布 5.2.4 马尔可夫链的状态分类_状态的基本属性 一、可达与相通 可达的定义：对给定的两个状态i和j,若存在正整数n≥1,使得pij(n)﹥0,则称从状态i 可到达状态j，记为i→j；否则，称从状态i不可到达状态j，记为i→j。 若从状态i不可到达状态j时，一个齐次马尔可夫链对于一切n (≥1), 总有pij(n)=0。 概率p