第5部分马尔可夫过程教学文案.pptVIP

例5.2.5 (艾伦菲斯特问题) 设一个坛子中装有m个球，它们或是红色的，或是黑色的，从坛中随机地摸出一个球，并换入一个相反颜色的球.设经过n次摸换坛中黑球数为Xn，则{Xn, n≥0}是以S={0,1,2,…,m}为状态空间的齐次马尔可夫链. 5.2 马尔可夫链的转移概率与概率分布 其一步转移概率矩阵为 5.2 马尔可夫链的转移概率与概率分布 例5.2.6(卜里耶问题) 设坛子中有a只红球，b只黑球，从坛中随机地摸出一个球，然后把该球放回，并加入与摸出的球颜色相同的球c只.设经过n次摸取坛中黑球数为Xn ，则{Xn, n≥0}是以S={b,b+c,b+2c,…}为状态空间的非齐次马尔可夫链. 5.2 马尔可夫链的转移概率与概率分布 其一步转移概率矩阵为 5.2 马尔可夫链的转移概率与概率分布 例 5.2.7 设{Xn, n≥0}具有三个状态0,1,2的齐次马尔可夫链，其一步转移概率矩阵为 初始分布 试求:（1） （2） 5.2 马尔可夫链的转移概率与概率分布 解 由于因此(1)(2) 5.2 马尔可夫链的转移概率与概率分布 例 5.2.8 有一多级传输系统只传输数字0和1，设每一级的传真率为p，误码率为q=1-p，且一个单位时间传输一级，X0是第一级的输