第五章动态规划12-5.pptVIP

1 3 2 六、某商店在未来四个月里,利用一个仓库经销某种商品，该仓库的最大容量为1000件，每月中旬订购商品，并于下月初取到订货。据估计：今后四个月这种商品的购价 pk 和售价qk 如表所示。假定商店在1月初开始经销时仓库已存有该种商品500件，每月市场需求不限，问应如何计划每月的订购与销售数量，使这四个月的总利润最大？(不考虑仓库的存储费用。) 月份 k 购价 pk 售价 qk 1 10 12 2 9 9 3 11 13 4 15 17 设状态变量 sk 表示第 k 个月的库存量； 决策变量 xk 和 yk 分别表示第 k 个月的订货量和销售量； H=1000为仓库的最大库容，则状态转移图: 第 k 个月的状态转移方程：sk+1 = sk + xk – yk 第 k 个月的效益函数：dk (sk ，xk，yk) = qk yk – pk xk 第 k 个月的最优指标函数： 1月 3月 2月 4月 月份 k 购价 pk 售价 qk 1 10 12 2 9 9 3 11 13 4 15 17 显然，y4*=s4，x4*=0 为最优决策，这时 f4* (s4)=17s4 1月 3月 2月 4月 1月 3月 2月 4月 第三节 动态规划模型的建立与求解 一、动态规划模型的建立 1. 动态规划是一种辅助的决策方法，并与有关的优化算法相结合起来求解决策问题的最优解。如何建立动态规划模型呢？ 建立动态规划的模型就是分析问题并建立问题的动态规划基本方程。 成功应用动态规划方法的关键在于识别问题的多阶段特征，将问题分解成为可用递推关系或联系起来的若干子问题，或者说正确的建立具体问题的基本方程，这需要经验与技巧。 而正确建立基本递推关系方程的关键在于正确选择状态变量，保证各阶段的状态变量其有 递推的状态转移关系 xk+1=T(xk,uk) 2. 与时间无明显关系的静态最优化问题，可列出静态 模型。 为了应用动态规划方法求解，可以人为的赋予它 “时段”概念，将投资项目排序：（投资问题中，一般可使 用的资金为状态变量）确定阶段、状态变量、决策变量、状态转移方程、指标函数等（可从状态转移图写） P212 例7： 建立动态规划模型的要点 阶段、状态变量、决策变量(状态方程)、 指标函数 二、逆序解法与顺序解法 动态规划的求解有两种基本方法： 逆序解法（后向动态规划方法） 顺序解法（前向动态规划方法） 逆序解法：寻优的方向与多阶段决策过程的实际行进 方向相反，从最后一段开始计算，逐段前 推，求得全过程的最优策略。 顺序解法：寻优方向同于过程的行进方向，计算是从 第一段开始逐段向后递推，计算后一阶段 要用到前一阶段的最优结果，最后一段计 算的结果就是全过程的最优结果。 顺序解法与逆序解法本质上并无区别。 一般地说，当初始状态给定时可用逆序解法， 当终止状态给定时可用顺序解法；若问题给定了一 个初始状态，一个终止状态，则两种方法均可使用； 若初始状态虽已给定，终点状态有多个，须比较到 达不同终点状态的各个路径及最优指标函数值，以 选取总效益最佳的终点状态时，使用顺序解法比较 简便。 两种解法的区别： 1.状态转移方程： 逆 xk+1=T(xk,uk) 顺 xk =T(xk +1,uk +1) 2.指标函数定义： 逆 fk(xk):k阶段到终点的后部z过程的 最优效益值 顺 fk(xk +1):第k阶段到起点的前部z过 程的最优效益值 3.基本方程形式 1 k n … … … 逆x1 xk xk+1 xn+1 顺 x1 x2 xk xk+1 Xn+1 三、基本方程分段求解时的几种常用算法