05 第五篇 动态规划.pptVIP

第五章 动态规划 最优决策为：第一年继续使用，第二年继续使用，第三年更新，第四年继续使用，第五年继续使用，这时总成本最小，最小总成本为45万元。 第四节 案例分析 第五章 动态规划 第四节 案例分析 （2） 由表5-40可知，用逆序递推法求解时，函数指标值f4 (2) 可取19或23。 继续使用 更新 1 14 23 14 继续使用 2 19 23 19 继续使用 3 29 23 23 更新 4 36 23 23 更新 表5-40 第四阶段决策表 ———————— 第五章 动态规划 本章小结 1．动态规划是解决多阶段决策过程最优化的一种数量方法。其特点在于：将问题的全过程分成几个互相联系的阶段，在不同阶段，根据系统所处的状态，不断地做出最优决策以及整个过程的最优策略。 2．最优化原理：无论过去的状态和决策如何，相对于前面的决策所形成的状态而言，余下的决策序列必然构成最优子策略。 第五章 动态规划 本章小结 3. 动态规划的基本概念：阶段、状态、决策、策略、状态转移方程和指标函数 4．建立动态规划模型的步骤：①划分阶段；②正确选择状态变量；③确定决策变量及允许决策集合；④确定状态转移方程；⑤确定阶段指标函数和最优指标函数并建立动态规划基本方程。 第五章 动态规划 本章小结 5．动态规划方法关键在于：正确地写出基本的递推关系式和恰当的边界条件。从边界条件开始，逐段递推寻优，依次进行，最后一个子问题所得的最优解，就是整个问题的最优解。 第五章 动态规划 在这条最短路线上任意状态Sk 到终点E，可能有几条线路。 如以B1 为始点，则有四条路线到达终点E： 二、最优化原理 根据最优化原理在这四条路线（四个子策略）中必应选择最短的一条，才能构成全过程的最优策略（最短路线），显然应选择: 第五章 动态规划 最优化原理阐述这样一个事实，对全过程的任一状态点sk ，不考虑sk 以前的决策，只保证sk 以后的决策是最优的。在例5-2中对状态B1 而言，不关心从全过程始点 A到状态B1 是如何决策的，只关注状态B1 后的决策，只保证B1 后的决策是最优的即可。 二、最优化原理 最优化原理为动态规划从最后阶段的优化开始，逐步向前一阶段优化扩展直至第一阶段，从而达到全程优化的方法奠定了理论基础。 第五章 动态规划 由最后一个阶段优化开始，按逆向顺序逐步向前一阶段优化扩展，并将后一阶段的优化结果带到前一个阶段中去，依次逐步向前递推，直至全过程的优化结束。 三、 动态规划问题建模与求解方法 动态规划的基本方法 这种逆向顺序逐步向前递推的方法可简称为逆序递推法，它是解动态规划问题中经常采用的一种方法。 第五章 动态规划 第1步： 将所要解决的问题恰当地划分为若干阶段，经常是按事物发展的时间和空间来划分不同阶段，各阶段的首尾要互相衔接。 第2步： 正确地选择状态变量Sk ，确定它在每一阶段的取值范围。 三、 动态规划问题建模与求解方法 动态规化问题的求解步骤 第五章 动态规划 第3步： 对每个状态变量Sk （ k =1，2,…,n），找出与其对应的决策变量xk (Sk ) 以及允许决策集合Dk (Sk ) 。 三、 动态规划问题建模与求解方法 第4步： 对每状态变量Sk ，及对应的决策变量xk (Sk ) 计算出本阶段的各个指标值。 第5步； 正确写出状态转移方程 第五章 动态规划 三、 动态规划问题建模与求解方法 第6步： 对每一对Sk , xk (Sk ) ，计算指标值 把指标值进行比较取出最优的一个，即 由 k = n ，n –1,…,2,1 将上式依次逐步递推，直至全过程的优化结束，即可求出动态规划问题的最优策略及最优指标值。 第五章 动态规划 例5-5 (生产存贮问题) 某药厂定期为某医药公司提供某种药品，该医药公