多阶段决策过程的最优化.ppt

第七章 动态规划 7.1 多阶段决策过程的最优化 7.2 动态规划的基本概念和求解思路 7.3 离散型动态规划问题 7.4 连续型动态规划问题 7.5 动态规划方法应用举例 7.1 多阶段决策过程的最优化 动态规划是运筹学的重要分支，他的研 究对象是多阶段决策问题。 所谓多阶段决策问题，是指问题本身可 以按照时间、空间等划分为若干个相互联系 的阶段． 动态规划模型的分类： 连续型 与 离散型 确定型 与 随机型 时间的 与 空间的 …… …… 实际问题常常是复合的。 本章主要研究动态与静态确定型的决策过程。 7.1.1 多阶段决策问题 动态规划的研究对象是多阶段决策问题。 对于多阶段决策问题，根据问题本身的 特点可以将其求解过程划分为若干个相互联 系的阶段。 每个阶段都有若干个方案可供选择，因 此每一阶段都需要做出决策。 各个阶段确定的决策构成一个决策序列， 称为一个策略． 在所有可供选择的策略中，对应效果最 好的策略称为最优策略。 7.1.2 多阶段决策问题举例 （ 1 ）工厂生产过程 （ 2 ）设备更新问题 （ 3 ）连续生产过程的控制问题 （ 1 ）资源分配问题 （ 2 ）运输网络问题 ? ? ? ? ? ? ? ? ? ? 与时间有关 与时间无关 7.1.3 动态规划求解的多阶段决策问题的特点 一般来说，系统在某个阶段的状态可能 与系统过去经历的状态和决策有关． 能用动态规划方法求解的多阶段决策问题 必须具有“ 无后效性 ”的特点。 所谓“ 无后效性 ”，即过去的历史不影 响未来的发展． 过往的历史仅仅体现在本阶段的初始状 态上． 例 最短线路问题 A 1 B 2 B 1 C 2 C 3 C 1 D 2 D E 3 3 3 3 4 4 4 4 5 5 6 6 6 7 7 4 从 地到 地铺设一条管道，中间经过三个中 间站；第一中间站可选 或 ，第二中间站 可选 、 或 ，第三中间站可选 或 ，问 如何选择可使管线最短？ A 1 B 2 B 1 C 2 C 3 C 1 D 2 D E 7.1.3 动态规划方法导引 枚 举 法 A 1 2 B B ? ? ? ? ? ? ? ? ? ? ? 1 2 3 C C C ? ? ? ? ? ? ? ? ? 1 2 D D ? ? ? E ? 1 2 3 C C C ? ? ? ? ? ? ? ? ? 1 2 D D ? ? ? 1 2 D D ? ? ? 1 2 D D ? ? ? 1 2 D D ? ? ? 1 2 D D ? ? ? E ? E ? E ? E ? E ? E ? E ? E ? E ? E ? E ? 17 19 16 17 20 17 17 19 14 15 18 15 ? 2 2 1 A B C D E ? ? ? ? 局部最优法 A 1 B 2 B 1 C 2 C 3 C 1 D 2 D E 3 3 3 3 4 4 4 4 5 5 6 6 6 7 7 4 （贪婪算法） （动态规划的逆序法）： 1. 先确定第四个阶段的最短子路线 1 : D E ? 2 : D E ? 1 ( , ) 3 d D E ? 2 ( , ) 4 d D E ? 记作： 4 1 4 2 ( ) 3 ( ) 4 f D f D ? ? ? ? ? 其中， 表示从 第 k 阶段的起点 X 到终点 E 的最短 路线 . ( ) k f X A 1 B 2 B 1 C 2 C 3 C 1 D 2 D E 3 3 3 3 4 4 4 4 5 5 6 6 6 7 7 4 （分四个阶段） 动态规划法 2. 再确定最后两个阶段的最短子路线 1 1 : C D E ? ? 1 1 4 1 1 2 4 2 ( , ) ( ) min ( , ) ( ) d C D f D d C D f D ? ? ? ? ? ? ? ? 3 1 3 2 3 3 ( ) ( ) ( ) f C f C f C ? ? ? ? ? ? ? ? ? ? ? ? 5 3 min 6 4 ? ? ? ? ? ? ? ? ? 8 ? 2 1 4 1 2 2 4 2 ( , ) ( ) min ( , ) ( ) d C D f D d C D f D ? ? ? ? ? ? ? ? 4 3 min