第6讲马氏链模型.pptVIP

数学建模;线性代数模型;四 马尔科夫链模型;讨论材料1;推测会有什么结果;;; 不管开始经营情况如何，经过足够长时间后，商店销路不好的概率大于好的概率，好坏的可能是4/9和5/9;表示销路好；;表示已知这月处于状态;3 建模;4 求解 ;当;;具有无后效性的，时间、状态均为离散的随机转移 过程，通常用马氏链（Markov Chain）模型描述。;健康与疾病问题;比较材料1与材料2的结果，你能得出什么结论？;0.2;经计算;0.02;设;第;;，当它的所有分量是非负，;定义1 一个有;定义2 转移概率;定理1 若马氏链的转移矩阵为;定理2;上例中;马氏链模型的应用;1 信息传播问题;第n个人知道消息可能是真，也可能是假，有两种状态，记为;由;得;结论;2 迷宫问题（1）;三个分隔间的情形如何？;;迷宫问题（2）;1）分析;2 ）马氏链模型;记;西北大学数学系;由于从第2，3个分隔间总是以大于零的概率达到???1个分隔间，;本例中;4）结论;5）问题的进一步考虑;记;西北大学数学系;初始;结论;3 空气污染问题;试建立马氏链模型，在已知 和 的条件下;上机实习三