运筹学——动态规划.pptVIP

深圳大学管理学院 Yunchouxue 第七章 动态规划 以最短路问题为例，来说明动态规划的概念 一、动态规划基本概念： 1、阶段: 将所要研究的问题,按时间或空间特征分成若干个互相联系的阶段.简称“阶段”。 阶段就是作出决策的若干轮次。描述阶段的变量叫阶段变量，常用k表示阶段变量.上例中k＝1，2，3，4，5。 2、状态及性质 各阶段开始时的客观条件叫做状态.描述各阶段状态的变量叫做状态变量,常用sk表示第ｋ阶段的状态变量, sk的取值集合称为状态集合,用Sk表示。 阶段的出发位置，即阶段的起点。 上例中，第二阶段有两个状态，即Sk= {B1,B2} 动态规划中状态具有以下性质:某阶段状态一旦确定,以后过程的状态变化不受这个状态以前的影响,也就是说某状态以后的过程和以前无关,只与当前状态有关,我们称这种特性为“无后效性.”(即马尔科夫性。）P194 3、决策和策略 指从一个阶段某状态演变到下一阶段某状态的选择（决定）称为决策。 表示决策的变量叫做决策变量,常用uk(sk)表示.第k阶段当状态为sk时的决策变量. 在实际问题中决策变量的取值往往限制在一定的范围内,我们称此范围为允许决策集,常用Dk(sk)表示第k阶段从状态sk出发的允许决策集,因此有uk(sk) ∈Dk(sk). 在例1中D2(B1)={C1,C2,C3} . 策略 在例1中 D2(B1)={