55动态规划_15,16.pptVIP

第五章 动态规划 §5.1 动态规划的基本概念 §5.2 动态规划的模型、基本原理 §5.3 动态规划求解—逆序求解 §5.4 动态规划的应用 §5.5 动态规划其它形式的求解 极大点只可能在[0，s2]端点取得： f2(0) = 2s22 f2(s2) = 9s2 当s2 ? 9/2时, f2(0) ? f2(s2), 此时x2*=0 当s2 ? 9/2时, f2(0) f2(s2), 此时x2*= s2 k=1 时， f1(s1)= max {4x1+ f2(s2)} 0 ? x1 ? s1 当f2(s2)=9 s2时, f1(10)= max {4x1+ 9 s1-9 x1} 0 ? x1 ? 10 = max { 9 s1-5x1} 0 ? x1 ? 10 = 9 s1 (x1*=0) 但此时s2=s1-x1=10-0=109/2, 与s29/2矛盾。故舍去。 当f2(0)= 2s22时, f1(10)= max {4x1+ 2(s1-x1)2} 0 ? x1 ? 10 令 h1(s1,x1)= 4x1+ 2(s1-x1)2 由 dh1/dx1=4+4(s1-x1)(-1)=0 解得 x1=s1-1 而 d2h1/dx12=10 所以 x1=s1-1 是极小点， 比较[0，10]两个端点， x1=0时, f1(10) = 200 x1=10时, f1(10) = 40 所以 x1*=0 再由状态方程得： s2=s1-x1*= 10-0=10 由于 s2 ? 9/2， 因此 x2*=0, s3=s2-x2*= 10-0=10 所以 x3*= s3 = 10 最优投资方案为全部资金投入第3个项目可得最大收益200万元。 某些静态规划问题可用动态规划法来求解。 用动态规划法求解 max z =x1.x22.x3 x1+x2+x3=c xi≥0 i=1,2,3 例5.6 求解静态规划问题 下面应用动态规划方法求解例5.1。为了获得每一个后部子过程的最佳效益值,只能运用逆序递推方法求解,即由最后一段到第一段逐步求出各点到终点的最短路线,最后求出A点到E点的最短路线。运用逆序递推方法的好处是可以始终盯住目标,不致脱离最终目标。例5.1是一个四阶段决策问题,一般可分为四步： 第一步,从k=4开始,状态变量s4可取两种状态D1,D2,它们到E点的距离分别为4和3,这也就是由D1和D2到终点E 的最短距离 即 f4(D1)=4, f4(D2)=3。 §5.3 动态规划的求解-逆序递推方法 第二步,k=3, 状态变量 s3 可取 3 个值即 C1,C2 和 C3, 这是需经过一个 中间站才能到达终点 E 的二级决策问题 。 为方便应用，规定用 d ( k s , k U ) 表 示由状态 k s 出发 , 采用决策 k U 到达下一阶段 1 + k s 时的两点距离。显然从 C 1 到 E 有两条路线需加以比较 , 取其中最短的 , 即： 3 f （ 1 C ）＝ min t y ü ? í ì + + ) ( ) , ( ) ( ) , ( 2 4 2 1 1 4 1 1 D f D C d D f D C d =min + + 3 5 4 3 =7 这说明 , 由C1 到 E 的最短距离为 7, 其路径为以 1 C → 1 D → E, 相应的决策 为 * 3 U （ 1 C ） = 1 D 3 f （ 2 C ）＝ min t y ü ? í ì + + ) ( ) , ( ) ( ) , ( 2 4 2 2 1 4 1 2 D f D C d D f D C d =min + + 3 2 4 6 =5 即从 C2 到 E 的最短距离为 5, 其路径为 2 C → 2 D → E, 相应的决策为 * 3 U （ 2 C ） = 2 D 3 f （ 3 C ）＝ min t y ü ? í ì + + ) ( ) , ( ) ( ) , ( 2 4 2 3 1 4 1 3 D f D C