东南大学随机过程课件第16讲离散时间Markov链.pptVIP

东南大学无线电工程系 《随机过程》教程第16讲 离散时间Markov链 东南大学移动通信国家重点实验室 陈 明 制作 内容提要 离散时间Markov链的定义 离散时间Markov链的状态分类 Markov链的定义 Markov链：状态值可数离散的Markov过程 离散时间Markov链 连续时间Markov链 离散时间Markov链 状态概率 状态概率矢量 转移概率 转移概率矩阵 C-K方程 平稳状态概率的求解 状态的互达 定义 等价类 可约 常返和瞬过 首达概率的定义 迟早到达概率 常返和瞬过 状态空间的分解 状态空间分解定理 有限状态分解定理 状态的周期 状态的遍历 作业 6.1 6.5 6.7 《随机过程》 第16讲 “离散时间Markov链”终。 * * （续）