高中数学概率统计讲义+练习含答案解析 23、马尔科夫链.pdfVIP

马尔科夫链

知识与方法

虽然贝叶斯公式不做要求，但是全概率公式已经是新高考考查内容了，利用全概率公式，我

们既可以构造某些递推关系求解概率，还可以推导经典的一维随机游走模型，即：设数轴上

一个点，它的位置只能位于整点处，在时刻t0时，位于点，下一个时刻，

xi(iN)



它将以概率或者

(0,1),1Xt

（）向左或者向右平移一个单位.若记状态ti表示：在时刻该点位

于位置，那么由全概率公式可得：

xi(iN)

P(Xt1i)P(Xti1)P(Xt1i|Xti1)P(Xti1)P(Xt1i|Xti1)

另一方面，由于P(Xt1i|Xti1),P(Xt1i|Xti1)，代入上式可得：

PPP.

ii1i1

进一步，我们假设在与处各有一个吸收壁，当点到达吸收壁时

x0xm(m0,mN)

被吸收，不再游走于是，P0,P1随机游走模型是一个典型的马尔科夫过程

.0m..

a

进一步，若点在某个位置后有三种情况：向左平移一个单位，其概率为，原地不动，其概

c

率为，向右平移一个单位，其概率为，那么根据全概率公式可得：

b

PaPbPcP

ii1ii1

典型例题

1．乙两人投篮，每次由其中一人投篮，规则如下：若命中则此人继续投籃，若末命中则换

为对方投篮．无论之前投篮情况如何，甲每次投篮的命中率均为0.6，乙每次投篮的命

中率均为．由抽签确定第次投篮的人选，第次投篮的人是甲、乙的概率各为．

0.8110.5

（1）求第2次投篮的人是乙的概率；

（）求第次投篮的人是甲的概率；

2i

XPX11PX0q,i1,2,,n

（3）已知：若随机变量服从两点分布，且iiii，

nn

EXqnnYEY

则ii．记前次（即从第1次到第次投篮）中甲投篮的次数为，求．

i1i1

iAiB

【解析】（1）记“第次投篮的人是甲”为事件，“第次投篮的人是乙”为事件，ii

所以，PBPABPBBPAPB|APBPB|B

