2025~2026学年难点7马尔科夫链问题讲期中期末重难点攻略.docVIP

2025~2026学年难点7马尔科夫链问题讲期中期末重难点攻略

一、解答题

1.马尔科夫链是概率统计中的一个重要模型，也是机器学习和人工智能的基石，在强化学习?自然语言处理?金融领域?天气预测等方面都有着极其广泛的应用.其数学定义为：假设我们的序列状态是，，那么时刻的状态的条件概率仅依赖前一状态，即.

如图，一质点在x轴上，从原点O出发向右运动，每次平移一个单位或两个单位，且移动一个单位的概率为，移动2个单位的概率为，设质点运动到的概率为，

(1)求；

(2)求的通项公式，求

二、单选题

2.马尔科夫链是概率统计中的一个重要模型，也是机器学习和人工智能的基石，在强化学习、自然语言处理、金融领域、天气预测等方面都有着极其广泛的应用.马尔科夫链因俄国数学家安德烈·马尔科夫得名，其过程具备“无记忆”的性质，即第次状态的概率分布只跟第次的状态有关，与第，，，?次状态无关.现有，两个盒子，各装有1个黑球和1个红球，现从，两个盒子中各任取一个球交换放入另一个盒子，重复进行次这样的操作后，记盒子中红球的个数为，恰有1个红球的概率为.则的值为（）

A．

B．

C．

D．

三、填空题

3.马尔科夫链是概率统计中的一个重要模型，也是机器学习