公选课动态规划讲述.pptVIP

* * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * 解： 设阶段k= 1, 2, 3, 4 依次表示4个阶段选路的过程 状态sk 表示 k 阶段初可能处的位置 决策xk 表示 k 阶段初可能选择的路线 阶段指标vk 表示 k 阶段与所选择的路线相应的路长 指标函数 表示 k 至4阶段的总路长 递推公式 k sk xk vk vkn=vk+ fk+1 fk Pkn* 4 3 D1 D2 E 5 E 2 5+0 5 2+0 2 D1E D2E C1 C2 C3 D1 3 D2 9 D1 6 D2 5 D1 8 D2 10 3+5 9+2 6+5 5+2 8+5 10+2 8 C1D1E 7 C2D2E 12 C3D2E k sk xk vk vkn=vk+ fk+1 fk Pkn* 4 3 D1 D2 E 5 E 2 5+0 5 2+0 2 D1E D2E C1 C2 C3 D1 3 D2 9 D1 6 D2 5 D1 8 D2 10 3+5 9+2 6+5 5+2 8+5 10+2 8 C1D1E 7 C2D2E 12 C3D2E k sk xk vk vkn=vk+ fk+1 fk Pkn* 2 B1 B2 B3 1 A B1 2 2+20 19 AB2C1D1E B2 5 5+14 B3 1 1+19 P14*= AB2C1D1E（最短路）； f1= 19（最短距） C1 12 C2 14 C1 6 C2 10 C3 4 C1 13 C2 12 C3 11 12+8 14+7 6+8 10+7 4+12 13+8 12+7 11+12 20 B1C1D1E 14 B2C1D1E 19 B3C2D2E 2、连续型——用公式递推求解 [例4] 用动态规划方法求解例1中的生产负荷问题。 某种机器可以在高、低两种负荷下进行生产。高负荷年产量8，年完好率0.7；低负荷年产量5，年完好率0.9。现有完好机器1000台，需制定一个5年计划，以决定每年安排多少台机器投入高、低负荷生产，使5年的总产量最大。 解： 设阶段k= 1, 2, 3, 4, 5 表示第 k 年安排机器的过程 状态sk 表示第 k 年初的完好机器台数 决策xk 表示第 k 年投入高负荷的机器台数；则投入低负荷的台数为sk – xk 阶段指标vk =8xk +5(sk –xk) 指标函数 基本方程： 状态转移sk+1 =0.7xk +0.9(sk –xk) k=5 k=4 sk+1=0.7xk +0.9(sk –xk) k=3 k=2 k=1 因此，最优计划为： 第1年 第2年 第3年 第4年 第5年 高负荷 0 0 810 567 397 低负荷 1000 900 0 0 0 总产量为：23720 设备更新问题 问题的一般提法 某公司购进一批设备投入运营，公司每年初需对设备作出更新或继续使用的决定。假设第k年中，rk(tk)表示役龄为tk的设备使用一年的收入，uk(tk)表示役龄为tk的设备使用一年的维修费用，ck(tk)表示役龄为tk的设备更新成新设备的费用。现公司需制定一个n年计划，以决定如何安排使n年的总收入最大。 [例] 某台新设备的年效益、年维修费、更新费如下表。试确定今后5年内的更新策略，使总收益最大。 役龄 0 1 2 3 4 5 效益rk(t) 5 4.5 4 3.75 3 2.5 维修费uk(t) 0.5 1 1.5 2 2.5 3 更新费 ck(t) 0.5 1.5 2.2 2.5 3 3.5 解： （1）阶段：k= 1, 2, 3, 4, 5 计划使用该设备的年限 （2）状态sk 表示第 k 年初设备已使用过的年数（役龄） （3）决策xk 表示第 k 年初设备是否更新 （5）阶段指标vk 指标函数 （6）基本方程： （4）状态转移sk+1 = sk*(1 – xk ) + 1 k=5 役龄 0 1 2 3 4 5 效益rk(t) 5 4.5 4 3.75 3 2.5 维修费uk(t) 0.5 1 1.5 2 2.5 3 更新费 ck(t) 0.5 1.5 2.2 2.5 3 3.5 k=5 役龄 0 1 2 3 4 5 效益rk(t) 5 4.5 4 3.75 3 2.5 维修费uk(t) 0.5 1 1.5 2 2.5 3 更新费ck(t) 0.5 1.5 2.2 2.5 3 3.5 k=4 k=3 k=2 k=1 最优策略X*={0，1，1，1，0} 即第2、3、4年初更新一次，总效益为17万元。 资源分配问题 1、问题的一般提法 设有某种资源，总数量为a，用于生产n种产品；若分配数量xi用于生产