马可夫链.ppt.pptVIP

马可夫链问题 1. 定义 在生物、经济、工程、物理、化学等领域有很多现象或过程常常按同一模式反复发生多次，每一过程产生的结果都是某几个特定结果之一，并且每一次过程产生的结果都只依赖于上一次过程的情况。 马可夫链就是用来描述上述问题的一个数学模型。如果一个向量的各个分量都是非负数并且它们的和等于1，则称这个向量为概率向量。列向量为概率向量的方阵称为统计局阵。设 为一个统计局阵，由概率向量 构成的序列称为马可夫链。 2. 实际问题 已知某地区2000年城市和农村人口分别为 和 ， ， 记 ，表示2000年的人口向量，对2001 及其以后的年份，其相应的人口向量分别用下列向 量表示： ， ， ， 人口统计显示，每年有 5% 的城市人口流向农村，同时又有 3% 的农村人口流向城市。于是，一年以后城 人口 和农村人口 分别重新分布为人口向量 ， 于是，2001年的人口向量为 即