5 动态规划.pptVIP

第五章 动态规划 §5.1 动态规划的基本概念和方法 §5.2 动态规划的基本原理﹑模型和解法 §5.3 前向动态规划法 §5.4 动态规划的应用 5.3.1 顺序解法的基本思路 最短路线问题的顺序解法 5.3.3 顺序解法与逆序解法的异同 4. 指标函数的定义不同 在逆序解法中 , 最优指标函数 ) ( K k S f 定义为第 K 段从状态 k s 出发 , 到 过程终点的后部子过程的最优效益值 , ) ( 1 1 S f 是整体最优函数值。 在顺序解法中 , 最优指标函数 ) ( K k S f 定义为第 K 段从状态 k s 回返 , 到 过程始点的前部子过程的最优效益值 , ) ( n n S f 是整体最优函数值。 5. 基本方程形式不同 在逆序解法中 , ） j n k j j n k u s V V , ( , ? = = ，基本方程为： ? í ì - = = + = + + + + 1 , 2 ,..., 1 , 0 ) ( )} ( ) , ( { ) ( 1 1 1 1 n n k s f s f u s V opt s f n n k k k k k k k 在顺序解法中 , ） j k j j k u s V V , ( 1 , 1 ? = = ，基本方程为： ? í ì = = + = - - n k s f u s V s f opt s f k k k k k k k ,..., 2 , 1 0 ) ( )} , ( ) ( { ) ( 0 0 1 1 一、应用之一——投资问题 设总投资额为 a 万元 , 拟投资于n个项目上，已知对第 i 个 项目投 资 i x 万元 , 收益函数为 ) ( i i x g , 问应如何分配资金才可以使总收益最大 ? 这是一个与时间无明显关系的静态最优化问题 , 可先列出其静态模型为： maxV ＝ ? = n i i i x g 1 ) ( s.t. a x n i i ￡ ? = 1 0 3 i x (i=1,2,…,n) §5.4 动态规划的应用 1. 状态变量 k s ：表示第 K 段可用于剩余的 n - k+1 个项目的资金数 , 显 然有 1 s =a, 1 + n s =0 。 2. 决策变量 k u ： 即应分配第 K 个项目上的投资额。 3. 状态转移方程： k k k u s s - = + 1 4. 指标函数： ? = = n k i i i u g V n k ) ( , 最优指标函数 k f （ k s ）：表示当可投资金数为 k s 时 , 投资于剩余的 n - k+1 个项目的最大收益。 5. 基本方程为： ? í ì = + = + + + + 0 ) ( )] ( ) ( max[ ) ( 1 1 1 1 n n k k k k k k s f s f u g s f k=n,n - 1,…,2,1 如果运用逆序递推寻优 , 则 ) ( 1 a f 就是所求的最大收益。 例 5.3 某企业共有设备 4 台 , 拟分给三个车间 , 各车间利用这些设备 为企业可提供的盈利 k k (u ) g 各不相同 ( 资料见表 4.4) , 问应如何分配这四台 设备才能使企业获得的盈利最大 ? 表 5.4 例 5.3 的有关资料 解：该问题与上述的资源分配问题 ( 即投资分配问题 ) 具有完全相同的模型， 因初始状态 S1=4 为已知，故可 运用逆序解法，在这里n=3,a=4。 设备分配数 ) ( 1 1 u g ) ( 2 2 u g ) ( 3 3 u g 0 1 2 3 4 0 4 6 7 7 0 2 5 6 8 0 3 5 7 8 一车间 二车间 三车间 单位：万元 当 k=3 时 , 状态变量 3 s 的取值范围为 3 s ＝ ｛ 0 ， 1 ， 2 ， 3 ， 4 ｝，同样 3 u 的取值范围也是 3 D ＝ ｛ 0 ， 1 ， 2 ， 3 ， 4 ｝ , 根据 3 3 4 u s s - = , 0 4 = s ， 即 3 3 s u = ，即 0 ) ( 4 4 = s f , 依基本方程可列出 K=3 时的结果如表 4.5 表 5.5 例 5.3 k=3 时的结果 说明：因本段 是最后一个