运筹学5(与动态规划) .ppt

第七章 动态规划 ７.1　动态规划问题和基本概念 ７.2 动态规划的基本原理 ７.3 动态规划的应用 枚举法： 在例７.1中，目标函数就是距离。如在第2阶段，状态为B2时，f2 (B2)则表示从B2到E的最短距离。本问题的总目标是求f 1(A), 即从A到E的最短距离。 下面应用动态规划方法求解例７.1。运用逆序递推方法求解,即由最后一段到第一段逐步求出各点到终点的最短路线,最后求出A点到E点的最短路线。 运用逆序递推方法的好处是可以始终盯住目标,不致脱离最终目标。 例７.1是一个四阶段决策问题,一般可分为四步： 第一步,从K=4开始 解： 1.将问题按工厂分为三个阶段，k=1,2,3 2.设 xk—分配给第k个工厂的设备台数。 当K=2时 当k=1时，s1=5, x1的可取值为0,1,2,3,4,5计算结果如下： 解：1.设阶段变量为K,则每月为一个阶段,K=1,2,3,4 当K=4时，S4的最小可能值为0，即4月初没有存货。 S4的最大可能值={5×3＋1－（3 ＋3 ＋2），4}=4 即 S4={0，1，2，3，4}。 （K=4） 当K=3时，S3的最小值={5×2+1－6，6}=5即 S3={0,1,2,3,4,5} (k=3) 1 2 3 4 2. 状态变量 k s ：表示第 K 段可用于剩余的 n - k+1 个项目的资金数 , 显 然有 1 s =A, 1 + n s =0 。 3. 决策变量 k x ： 即应分配第 K 个项目上的投资额。 1.阶段：K=1，2，…，n 4. 状态转移方程： k k k x s s - = + 1 5. 最优目标函数 k f （ k s ）：表示当可投资金数为 k s 时 , 投资于剩余的 n- k+1 个项目的最大收益。 6. 基本方程为： ? í ì = + = + + + + 0 ) ( )] ( ) ( max[ ) ( 1 1 1 1 n n k k k k k k s f s f x g s f k=n,n - 1,…,2,1 如果运用逆序递推寻优 , 则 ) ( 1 s1 f 就是所求的最大收益。 7.2.3 动态规划求解时的几种常用算法 １．离散变量的分段穷举法 　　如最短路问题的解法, 离散型资源分配问题等． ２．连续变量的解法 根据方程的具体情况灵活选取求解方法． a.逆序解法 b.顺序解法 如连续型资源分配问题等． 例　用动态规划方法求解下列问题 解：采用逆序解法 顺序解法的基本方程为： ? í ì = + = + 0 ) ( )] ( ) ( max[ ) ( 1 4 4 k+1 k k k k k s f s f x g s f k=3,2,1 当Ｋ＝3时，有 可以看到,当 时, f3(s3)取得极大值 当Ｋ＝２时，有 求其极值点: 这是一个极小点, 为什么? 所以,极大值只可能在[0,s2]的端点取得, 则有 当Ｋ＝1时，有 分两种情况: 讨论! 当 x1=0时, f1(10)=200, 达到最大值. 再由状态转移方程顺推,可求出: x2=0 x3=10 例　用动态规划方法求解下列问题 解：采用顺序解法 顺序解法的基本方程为： ? í ì = + = － 0 ) ( )] ( ) ( max[ ) ( 1 １ ０ k k k k k＋１ k s f s f x g s f k=3,2,1 当Ｋ＝１时，有 当Ｋ＝２时，有 当Ｋ＝3时，有 记 求导，得 解得 ∴此点仅为极小点 极大值应在[0，s4]=[0，10]的端点取得 当x3=0时，f3 (10)=90 当x3=10时，f3 (10)=200 再由状态转移方程逆推： 逆序解法的过程见书 P ７.3.1 资源分配问题 例 某企业共有设备 5 台 , 拟分给三个工厂 , 各工厂利用这些设备 为企业可提供的盈利 k k (x ) g 各不相同 ( 见表 ７.4) , 问应如何分配这四台 设备才能使企业获得的盈利最大 ? ７.3 动态规划应用举例 表 ７.4 有关资料 单位：万元 设备分配数 )