决策理论-第六章-序贯决策分析.pptxVIP

第六章 序贯决策分析;第一节 多阶段决策;第一节 多阶段决策;第一节 多阶段决策;第一节 多阶段决策;第一节 多阶段决策;第一节 多阶段决策;第一节 多阶段决策;第一节 多阶段决策;第二节 序贯决策; 例6-3 设有某石油勘探队，在一片估计能出油的荒田钻探，可以先做地震试验，然后决定钻井与否。或者不做地震试验，只凭经验决定钻井与否。做地震试验的费用每次30000元，钻井费用为10000元。若钻井后出油，这井队可收入40000元；若不出油就没有任何收入。各种情况下出油的概率已估计出，并标在图6-2上。问钻井队的决策者如何做出决策使收入的期望值为最大。 ;第二节 序贯决策;;;;;动态规划问题的典型例子： 1 . 生产决策问题：企业在生产过程中，由于需求是随时间变化的，因此企业为了获得全年的最佳生产效益，就要在整个生产过程中逐月或逐季度地根据库存和需求决定生产计划。; 2 . 最短路问题：给定一个交通网络图如下，其中两点之间的数字表示距离（或花费），试求从A点到G点的最短距离（总费用最小）。; （一）、基本概念 1、阶段： 把一个问题的过程，恰当地分为若干个相互联系的阶段，以便于按一定的次序去求解。 描述阶段的变量称为阶段变量。阶段的划分，一般是根据时间和空间的自然特征来进行的，但要便于问题转化为多阶段决策。 ; 3、决策：表示当过程处于某一阶段的某个状态时，可以作出不同的决定，从而确定下一阶段的状态，这种决定称为决策。; 6、状态转移方程：是确定过程由一个状态到另一个状态的演变过程，描述了状态转移规律。;;;例1、从A 地到D 地要铺设一条煤气管道,其中需经过两级中间站，两点之间的连线上的数字表示距离，如图所示。问应该选择什么路线，使总距离最短？ ; 解：整个计算过程分三个阶段，从最后一个阶段开始。; d( B1,C1 ) + f1 (C1 ) 3+1 f2 ( B1 ) = min d( B1,C2 ) + f1 (C2 ) = min 3+3 d( B1,C3 ) + f1 (C3 ) 1+4 4 = min 6 = 4 5; d( B2,C1 ) + f1 (C1 ) 2+1 f2 ( B2 ) = min d( B2,C2 ) + f1 (C2 ) = min 3+3 d( B2,C3 ) + f1 (C3 ) 1+4 3 = min 6 = 3 5;第三阶段（ A → B ）： A 到B 有二条路线。;A;例2：;;;;求从A到E的最短路径;练习1：;第三节 马尔可夫决策;第三节 马尔可夫决策;在经济现象中存在一种“无后效性”。即“系统在每一时刻的状态仅仅取决于前一时刻的状态，而与其过去的历史无关。”;第三节 马尔可夫决策;第三节 马尔可夫决策;例1　某地区有甲、乙、丙三家食品厂生产同一食品，有1000个用户（或购货点），假设在研究期间无新用户加入也无老用户退出，只有用户的转移，已知2002年5月份有500户是甲厂的顾客；400户是乙厂的顾客；100户是丙厂的顾客。6月份，甲厂有400户原来的顾客，上月的顾客有50户转乙厂，50户转丙厂；乙厂有300户原来的顾客，上月的顾客有20户转甲厂，80户转丙厂；丙厂有80户原来的顾客，上月的顾客有10户转甲厂，10户转乙厂。试计算其状态转移概率。;;状态转移矩阵;;;;;;第三节 马尔可夫决策;第三节 马尔可夫决策;;;;;;第三节 马尔可夫决策;第三节 马尔可夫决策;第三节 马尔可夫决策;;第三节 马