管理运学课件第9章 动态规划.pptVIP

课件 第9章 动态规划 教学目标与要求 【教学目标】 1. 理解下列基本概念：状态变量，决策变量，策略，状态转移方程，指标函数和最优值函数 2. 理解动态规划的基本方程和最优化原理 3. 理解动态规划模型建立过程 5. 掌握顺序算法与逆序算法解题方法 【知识结构】 [引例] 马车驿站问题 本章主要内容 9.1 动态规划的概念和原理 9.1.1 动态规划的基本概念 9.1.2 动态规划的最优化原理 9.2 动态规划的模型和求解 9.2.1 动态规划模型的建立 9.2.2 动态规划问题的解法 9.3 应用举例 案例1 资源分配问题 案例2 设备负荷问题 案例3 生产库存问题 案例4 背包问题 本章小结 9.1.1 动态规划的基本概念 5.1.2 动态规划的基本原理 5.1.2 动态规划的最优化原理 9.2.1 动态规划模型的建立 9.2.1 动态规划模型的建立 9.2.2 动态规划问题的解法:逆序法 9.2.2 动态规划问题的解法:顺序法 案例1 资源分配问题 案例2 设备负荷问题 某种机器可在高低两种不同的负荷下进行生产，设机器在高负荷下生产的产量函数为g=9x，其中x为投入生产的机器数量，季度完好率为a=0.65，在低负荷下生产的产量函数为h=4y，其中y为投入生产的机器数量，季度完好率为b=0.95。设资源拥有量100. 解 4季度看成4阶段sk第k季初拥有完好机器数xk第k季分配给高负荷机器数,则低负荷分配数sk-xk下季度初完好机器数sk+1=0.65xk+0.95(sk-xk)第k季产量vk=6xk+4(sk-xk) Lingo程序 案例3 生产库存问题 案例3 生产库存问题 案例3 生产库存问题 案例3 生产库存问题 案例4 背包问题 案例4 背包问题 案例4 背包问题 本章小结 * * 课件 课件 课件 1 2 4 8 3 3 5 3 8 6 6 7 8 6 3 2 3 5 A B2 B1 D2 D1 C3 C2 C4 C1 E A — B — C — D — E 阶段1 阶段2 阶段3 阶段4 4个阶段 E E D1D2 D1D2 D1D2 D1D2 C2C3C4 C1C2C3 1 D1?E 1 D2?E 2 C4?D1 C4?D2 2 C3?D1 C3?D2 2 C2?D1 C2?D2 2 C1?D1C1?D2 3 B2?C2B2?C3B2?C4 3 B1?C1B1?C2B1?C3 B1B2 2 A?B1A?B2 A B2 B1 C4 C3 C2 C1 D1 D2 4 3 2 1 终点 路线数 可选路线 起点 阶段 一共有2×3×2×1=12条不同的路线 f(E)=0 f(D1)=2 f(D2)=1 f(C1)=8 f(C2)=5 f(C3)=4 f(C1)=5 f(B1)=8 f(B2)=11 f(A)=13 回顾分析过程: 1.将分析对象划分成4阶段; 2.每阶段始点状态与终点状态有关,而不考虑始终点状态如何形成(无记忆性); 3.每阶段各始点状态为终点状态与始点至终点距离之和的最小值(状态转移) 这种最优化方法称为动态规划, 由美国数学家贝尔曼等人于20世纪50年代创立. 课件 课件 1.阶段: 把所给问题的过程，恰当地分为若干个相互联系的阶段，以便能按一定的次序去求解。描述阶段的变量称为阶段变量，常用k表示。[导入案例]中k=1,2,3,4 2.状态变量: 每个阶段开始所处的自然状况或客观条件(用点集表示).如引例:第1阶段的状态就是起点A,记为s1={A};第2阶段有2个状态{B1,B2},记为s2={B1,B2};第3阶段有4个状态{C1,C2,C3,C4},记为s3={C1,C2,C3,C4};第4阶段有2个状态{D1,D2},记为s4={D1,D2}; 3.决策变量: 在某一阶段的某个状态时的不同选择,如引例中B1状态下有3种选择:B1—C1,B1—C2,B1—C3这3种选择构成了允许决策的集合。不同状态下允许决策的集合也不同，故决策变量是状态变量的函数，即xk(sk)∈D(sk) 1 2 4 8 3 3 5 3 8 6 6 7 8 6 3 2 3 5 A B2 B1 D2 D1 C3 C2 C4 C1 E A — B — C — D — E 阶段1 阶段2 阶段3 阶段4 4个阶段 4.策略 按顺序排列的决策组成的集合，由过程的第k阶段开始到终止状态为止的过程(或k子过程),k子过程的策略称子策略，记为Pk,n(sk),即 Pk,n(sk)={xk(sk),xk