关键词无后效性马尔可夫性齐次马尔可夫链n步转移知识分享.pptVIP

关键词： 无后效性(马尔可夫性) 齐次马尔可夫链 n步转移概率 n步转移概率矩阵 C-K方程 马氏链的有限维分布律 遍历性 极限分布(平稳分布);§1 马尔可夫过程及其概率分布; ;*;*;*;*;*;*;*;*;*;*;*;*;*; 例6：某计算机机房的一台计算机经常出故障，研究者每隔15分钟观察一次计算机的运行状态，收集了24个小时的数(共作97次观察)，用1表示正常状态，用0表示不正常状态，所得的数据序列如下： 11100100111111100111101111110011111111100011 01101111011011010111101110111101111110011011 111100111 设Xn为第n(n=1,2,…,97)个时段的计算机状态，可以认为它是一个齐次马氏链. 求(1)一步转移概率矩阵; (2)已知计算机在某一时段(15分钟)的状态为0，问在此条件下，从此时段起，该计算机能连续正常工作45分钟(3个时段) 的条件概率.;解: (1) 设Xn为第n(n=1,2,…,97)个时段的计算机状态， 可以认为它是一个齐次马氏链，状态空间I={0,1}， 96次状态转移情况是： 0→0：8次； 0→1：18次