运筹学动态规划一名校讲义.pptVIP

§2 动态规划的计算方法——递推方式 （20） 计算时，从k=4起步，逐步后退计算。 1）设货物分配车已开到k=4阶段，显然所剩货物x4应全部卸下，分给商店4。即 I(x4，4)= L(x4，4)，u4=x4，u4={0，1，…，6} x4 u4 I(x4，4) 0 1 2 3 4 5 6 0 1 2 3 4 5 6 0 4 5 6 6 6 6 §2 动态规划的计算方法——递推方式 （21） 2)设货物分配车已开到k=3阶段，车上载货量x3={0，1，…，6}。 (i) 若x3=0，则u3=0，I(0，3)=0 (ii) 若x3=1，则 I(1，3)= =max =max =4 u3=0 §2 动态规划的计算方法——递推方式 （22） (iii)若x3=2， I(2，3)=7，u3=1 (iv)若x3=3，I(3，3)=9，u3=2 (v)若x3=4，I(4，3)=11，u3=3 同理：若x3=5得I(5，3)=12，u3=3或4 若x3=6得I(6，3)=13，u3=3或4 3）设货物分配车开到k=2阶段，车上货物量为x2，则相应最优目标函数值为 I(x2，2)= §2 动态规划的计算方法——递推方式 （23） 4)退到起始阶段k=1时，x1=6 则I(6，1) = = 17 u1=1，2 全部结果示于最终网格中（参见图3-6）。图中，网格点右上方表示最优收益，网格点右下方表示最优决策。 共有下述6种最优分配方案（收益全为17） 1 17 1,2 x 6 5 4 3 2 1 0 0 0 0 k 0 4 2 5 3 6 4 6 5 6 6 13 3,4 12 3,4 11 3 9 2 7 1 4 0 0 0 4 0 7 0,1 9 0,1,2 11 1,2,3 13 2,3,4 15 k=1 2 3 4 图3-6 最终网络 0 6 ? 商店号 ? ? ? 分配 箱数 ? ? 1 2 3 4 ? 1 1 3 1 1 2 2 1 1 3 1 1 2 0 3 1 2 1 2 1 2 2 1 1 ? §2 动态规划的计算方法——递推方式 （24） §2 动态规划的计算方法——递推方式 （25） 二、前向动态规划法 虽然大多数阶段决策问题采用后 向动态规划比较直观，但对某些情况（例如，初始点明确给定）采用前向动态规划更为方便。本部分首先一般性引出前向动态规划的递推关系，然后举一简例说明。 定义极小数值函数I’(x，k)为 I’(x，k)= 且x(k)=g[x(k－1)，u(k－1)，k－1](状态转移方程) §2 动态规划的计算方法——递推方式 （26） 为研究方便，又可写成 x(k－1)=g－1[x(k)，u(k－1)，k－1] 即把x(k－1)表达成x(k)及u(k－1)的函数。 则迭代方程变为 I’(x，k)= 其中，L[x(j)，u(j)，j]表示j阶段的x(j)状态选择决策u(j)时的直接费用。I’(x，k)表示从起始点到达k阶段x状态所获得的最小费用，显然，这个费用是k =0，1，…，k－1阶段的直接费用和，而与k阶段x状态时的本身直接费用无关； §2 动态规划的计算方法——递推方式 （27） I’(x，k)由2项组成，一项是k－1阶段的直接费用 L[x(k－1)，u(k－1)，k－1]=L[g－1(x，u’， k－1)，u’，k－1] 另一项是递推项 I’[x(k－1)，k－1]= I’[g－1(x，u’， k－1)，k－1] u’表示到达k阶段x状态时，前一阶段采取的决策u(k－1)。显然，u’不同，则来自于k－1阶段的状态x( k－1)也不同。 起步：I’(x，0)为已知，设x(0)=c，则通常定义： I’(x，0)=0，当x=c时；I’(x，0)=?，当x≠c时 这样可迫使满足起始约束条件。 §2 动态规划的计算方法——递推方式 （28） 由此，可得出最优决策 为 { L[g－1(x，u’， k－1)，