《随机过程学习指导及习题解析》课件 第7章第2节正常返和零常返.ppt

正常返态和零常返态基本概念判断方法典型例题

1.状态i的首达时间表示从状态i出发首次返回状态i所需的时间状态i的首返概率一、基本概念

自状态i出发，经有限步终于到达状态i的概率定义1：如果fii=1,则称状态i是常返的.否则,即fii1,称状态i为非常返的或瞬过的.

说明1：当状态i为常返状态时，那么，不能构成一个分布。说明2：当状态i为瞬时状态时，那么，构成了一个分布，所以，对应了一个随机变量，其数学期望为：

称状态i是零常返的。定义2：如果状态i是常返状态，当且仅当称状态i是正常返状态。定义3：如果状态i是常返状态，当且仅当

二、判断方法方法一：按照定义判断