《管理运筹学课件第章动态规划》课件.pptVIP

管理运筹学课件 管理运筹学课件 第9章 动态规划 管理运筹学课件 * * 教学目标与要求 【教学目标】 1. 理解下列基本概念：状态变量，决策变量，策略，状态转移方程，指标函数和最优值函数 2. 理解动态规划的基本方程和最优化原理 3. 理解动态规划模型建立过程 5. 掌握顺序算法与逆序算法解题方法 【知识结构】 管理运筹学课件 * * [引例] 马车驿站问题 1 2 4 8 3 3 5 3 8 6 6 7 8 6 3 2 3 5 A B2 B1 D2 D1 C3 C2 C4 C1 E A — B — C — D — E 阶段1 阶段2 阶段3 阶段4 4个阶段 E E D1D2 D1D2 D1D2 D1D2 C2C3C4 C1C2C3 1 D1?E 1 D2?E 2 C4?D1 C4?D2 2 C3?D1 C3?D2 2 C2?D1 C2?D2 2 C1?D1C1?D2 3 B2?C2B2?C3B2?C4 3 B1?C1B1?C2B1?C3 B1B2 2 A?B1A?B2 A B2 B1 C4 C3 C2 C1 D1 D2 4 3 2 1 终点 路线数 可选路线 起点 阶段 一共有2×3×2×1=12条不同的路线 f(E)=0 f(D1)=2 f(D2)=1 f(C1)=8 f(C2)=5 f(C3)=4 f(C1)=5 f(B1)=8 f(B2)=11 f(A)=13 回顾分析过程: 1.将分析对象划分成4阶段; 2.每阶段始点状态与终点状态有关,而不考虑始终点状态如何形成(无记忆性); 3.每阶段各始点状态为终点状态与始点至终点距离之和的最小值(状态转移) 这种最优化方法称为动态规划, 由美国数学家贝尔曼等人于20世纪50年代创立. 管理运筹学课件 * * 本章主要内容 9.1 动态规划的概念和原理 9.1.1 动态规划的基本概念 9.1.2 动态规划的最优化原理 9.2 动态规划的模型和求解 9.2.1 动态规划模型的建立 9.2.2 动态规划问题的解法 9.3 应用举例 案例1 资源分配问题 案例2 设备负荷问题 案例3 生产库存问题 案例4 背包问题 本章小结 管理运筹学课件 * * 9.1.1 动态规划的基本概念 1.阶段: 把所给问题的过程，恰当地分为若干个相互联系的阶段，以便能按一定的次序去求解。描述阶段的变量称为阶段变量，常用k表示。[导入案例]中k=1,2,3,4 2.状态变量: 每个阶段开始所处的自然状况或客观条件(用点集表示).如引例:第1阶段的状态就是起点A,记为s1={A};第2阶段有2个状态{B1,B2},记为s2={B1,B2};第3阶段有4个状态{C1,C2,C3,C4},记为s3={C1,C2,C3,C4};第4阶段有2个状态{D1,D2},记为s4={D1,D2}; 3.决策变量: 在某一阶段的某个状态时的不同选择,如引例中B1状态下有3种选择:B1—C1,B1—C2,B1—C3这3种选择构成了允许决策的集合。不同状态下允许决策的集合也不同，故决策变量是状态变量的函数，即xk(sk)∈D(sk) 1 2 4 8 3 3 5 3 8 6 6 7 8 6 3 2 3 5 A B2 B1 D2 D1 C3 C2 C4 C1 E A — B — C — D — E 阶段1 阶段2 阶段3 阶段4 4个阶段 4.策略 按顺序排列的决策组成的集合，由过程的第k阶段开始到终止状态为止的过程(或k子过程),k子过程的策略称子策略，记为Pk,n(sk),即 Pk,n(sk)={xk(sk),xk+1(sk+1),…,xn(sn)} 当k=1时，即为全过程的一个策略。如引例中：D—E，即4到5过程起始有2个状态，D1和D2，因此有P4,5={D1—E，D2—E} 5.状态转移方程 确定过程是由一个状态到另一个状态的演变过程。第k阶段状态变量值给定后，如果确定决策变量，第k+1阶段状态变量值就完全确定。即：sk+1=T(sk,xk) 如引例中：若对A—B1,A—B2选择了A—B1,则s2=5,B1到C有3种选择:B1—C1、B1—C2、B1—C3，若选择了B1—C2,则s3=s2+d(B1,C2)=8 6.指标函数 用来衡量所实现过程优劣的一种数量指标。其基本方程有加法和乘法两种形式，通常加法形式用的较多，其公式为： 7.边界条件 起始或终止条件。 管理运筹学课件 * * 5.1.2 动态规划的基本原理 1 2 4 8 3 3 5 3 8 6 6 7 8 6 3 2 3 5 A B2 B1 D2 D1 C3