随机过程第四章复习题及其解答马尔科夫链 .pdfVIP

第四章 一、填空 1.参数集和状态集均为离散集的马尔可夫过程称为马尔可夫链。 2.设{X ,n єT}为马尔可夫链，称 pj=p{X0=j}为{X ,n єT}的初始概率，称 pj （n ） n n =p{Xn=j}为{X ,n єT}的绝对概率。 n 3.设{X ,n=0}为马尔可夫链，则一步转移概率 p =P{X =j|X =i} n ij n+1 n 4.矩阵      a 其元素非负且对每 i 有 a 1 ，称矩阵 a 为随机矩阵。 ij