预测与决策教程（第2版）课件：马尔可夫预测的应用.pptx

主要内容：马尔可夫预测的基本原理

马尔可夫预测的应用;5.2马尔科夫预测的应用;;马尔可夫预测是利用某一系统的现在状况及其发展动向去预测系统未来状况的一种预测方法。;公司A、B、C是美国中西部地区三家主要灭虫剂生产商。根据历史资料得知，三家公司产品的市场占有率分别为50%，30%，20%。由于C公司实行了改善销售与服务的经营管理决策，使其产品销售额逐期稳定上升，而A公司却在下降。通过市场调查发现三个公司间的顾客流动情况如表所示。其中产品销售周期是季度。;;未来各期的市场占有率：;稳态市场占有率;A公司的最佳经营策略;;乙方案争取策略，挖客户。;;;一般地,设{Xn}是状态空间为S={1，2，...，N}的齐次马尔科夫链，其状态转移矩阵为：;1．有限时段期望总报酬;;对i∈S，定义初始状态为i的无限时段单位时间平均报酬为：;若所考虑的马尔可夫链存在平稳分布，由定义，;可以证明，此时，;在现实生活中，今年的一元钱将大于明年的一元钱，即，明年的一元钱折算到现在计算，就不值一元钱了，如为，这个就称为折扣因子。;对有报酬的马氏链，定义从状态i出发的无限时段期望折扣总报酬为;;该公司可采用的维修策略有以下几种：

单状态策略：泵处于状态5时才进行修理，每次修理费用为500元。

两状态策略：泵处于状态4和5时进行修理，处于状态4时的修理费用每次为250元,处于状态5时的每次修理费用为500元。

三状态策略：泵处于状态3,4,5时进行修理，处于状态3时的每次修理费用为200元,处于状态4和5时的修理费用同前。

目前，该公司采用的维修策略为“单状态”策略。

假定不管处于何种状态，只要进行修理，泵的状态都将恢复为状态1。已知在不进行任何修理时的状态转移概率，如下表所示。;问题：确定哪个策略的费用最低。目标为长期运行单位时间平均报酬。;不维修时的状态转移概率矩阵：;单状态策略下：;两状态策略下：;三状态策略下：;单状态策略下：;