远程运筹学6 动态规划6.pdf

第 五 章 动 态 规 划 第 五 章 动 态 规 划 主要内容: 主要内容: §5.1 多阶段决策过程的最优化 §5.2 动态规划的基本概念和基本原理 §5.3 动态规划方法的基本步骤 §5.4 动态规划应用举例 5.1多阶段决策过程的最优化 一、多阶段决策问题 动态规划是把多阶段决策问题作为 研究对象。所谓多阶段决策问题，是指这 样一类活动过程，即根据问题本身的特 点，可以将其求解的全过程划分为若干个 相互联系的阶段(即将问题划分为许多个 相互联系的子问题)，在它的每一阶段都 需要作出决策，并且在一个阶段的决策确 定以后再转移到下一个阶段。 往往前一个阶段的决策要影响到后一个阶 段的决策，从而影响整个过程。人们把这 样的决策过程称做多阶段决策过程(Multi- Stagedecision process)。各个阶段所确定的 决策就构成了一个决策序列，称为一个策 略。一般来说，由于每一阶段可供选择的 决策往往不止一个，因此，对于整个过 程，就会有许多可供选择的策略。 若对应于一个策略，可以由一个量化的指 标来确定这个策略所对应的活动过程的效 果，那么，不同的策略就有各自的效果。 在所有可供选择的策略中，对应效果最好 的策略称为最优策略。把一个问题划分成 若干个相互联系的阶段选取其最优策略， 这类问题就是多阶段决策问题。 多阶段决策过程最优化的目标是要达到 整个活动过程的总体效果最优。由于各段决 策间有机地联系着，本段决策的执行将影响 到下一段的决策，以至于影响总体效果，所 以决策者在每段决策时不应仅考虑本阶段最 优，还应考虑对最终目标的影响，从而作出 对全局来讲是最优的决策。动态规划就是符 合这种要求的一种决策方法。 由上述可知，动态规划方法与“时间” 关系很密切，随着时间过程的发展而决定 各时段的决策，产生一个决策序列，这就 是“动态”的意思。然而它也可以处理与时 间无关的静态问题，只要在问题中人为地 引入“时段”因素，就可以将其转化为一个 多阶段决策问题。在本章中将介绍这种处 理方法。 二、多阶段决策问题举例 属于多阶段决策类的问题很多，例如 ： 例 1 工厂生产过程：由于市场需求是 例 1 一随着时间而变化的因素，因此，为了取得 全年最佳经济效益，就要在全年的生产过程 中，逐月或者逐季度地根据库存和需求情况 决定生产计划安排。 例 2 设备更新问题：一般企业用于生 例 2 产活动的设备，刚买来时故障少，经济效益 高，即使进行转让，处理价值也高，随着使 用年限的增加，就会逐渐变为故障多，维修 费用增加，可正常使用的工时减少，加工质 量下降，经济效益差，并且，使用的年限越 长、处理价值也越低，自然，如果卖去旧的 买新的，还需要付出更新费．因此就需要综 合权衡决定设备的使用年限，使总的经济效 益最好。 例 3 连续生产过程的控制问题：一般 化工生产过程中，常包含一系列完成生产过 程的设备，前一工序设备的输出则是后一工 序设备的输入，因此，应该如何根据各工序 的运行工况，控制生产过程中各设备的输入 和输出，以使总产量最大。 以上所举问题的发展过程都与时间因素 有关，因此在这类多阶段决策问题中，阶段 的划分常取时间区段来表示，并且各个阶 段上的决策往往也与时间因素有关，这就 使它具有了“动态”的含义，所以把处理这 类动态问题的方法称为动态规划方法。不 过，实际中尚有许多不包含时间因素的一 类“静态”决策问题，就其本质而言是一次 决策问题，是非动态决策问题，但是也可 以人为地引入阶段的概念当作多阶段决策 问题，应用动态规划方法加以解决。 例 4 资源分配问题：便属于这类静态 例 4 问题。如：某工业部门或公司，拟对其所 属企业进行稀缺资源分配，为此需要制定 出收益最大的资源分配方案。这种问题原 本要求一次确定出对各企业的资源分配 量，它与时间因素无关，不属动态决策， 但是，我们可以人为地规定一个资源分配 的阶段和顺序，从而使其变成一个多阶段 决策问题(后面我们将详细讨论这个问 题)。 例 5 运输网络问题：如图5-1所示的 例 5 运输网络，点间连线上的数字表示两地距 离(也可是运费、时间等)，要求从f (s )至