运筹学——动态规划.pdf

Yunchouxue 第七章 动态规划 1 以最短路问题为例，来说明动态规划的概念 C1 5 2 8 D 3 B 3 1 1 5 4 5 4 E 4 C2 5 6 1 A 5 D2 2 3 F 8 3 B 7 C3 4 1 E2 2 7 3 8 D3 4 C4 A B C D E F 2 一、动态规划基本概念：  1、阶段: 将所要研究的问题,按时间或空间特征分成 若干个互相联系的阶段.简称“阶段” 。 阶段就是作出决策的若干轮次。描述阶段 的变量叫阶段变量，常用k表示阶段变量. 上例中k＝1，2，3，4，5。 3 2、状态及性质  各阶段开始时的客观条件叫做状态.描述各阶段 状态的变量叫做状态变量,常用sk表示第ｋ阶段 的状态变量, s 的取值集合称为状态集合,用S 表 k k 示。 阶段的出发位置，即阶段的起点。  上例中，第二阶段有两个状态，即Sk= {B ,B } 1 2  动态规划中状态具有以下性质:某阶段状态一旦 确定, 以后过程的状态变化不受这个状态以前的影 响,也就是说某状态以后的过程和以前无关,只与 当前状态有关,我们称这种特性为“无后效性.”(即 马尔科夫性。）P194 4 3、决策和策略 指从一个阶段某状态演变到下一阶段某状 态的选择（决定）称为决策。 表示决策的变量叫做决策变量,u (s ) k k .第k阶段当状态为sk时的决策变量. 在实际问题中决策变量的取值往往限制在 一定的范围内,我们称此范围为允许决策集, 常用D (s )表示第k阶段从状态s 出发的 k k