动态规划方法.pdfVIP

第六章 动态规划方法 §1 动态规划算法的基本思想 动态规划方法是处理分段过程最优化问题的一类及其有效的方法。在 实际生活中，有一类问题的活动过程可以分成若干个阶段，而且在任 一阶段后的行为依赖于该阶段的状态，而与该阶段之前的过程如何达 到这种状态的方式无关。这类问题的解决是多阶段的决策过程。在 50 年代，贝尔曼（Richard Bellman ）等人提出了解决这类问题的“最 优化原理”，从而创建了最优化问题的一种新的算法设计方法－动态 规划。 最优化原理：多阶段过程的最优决策序列应当具有性质：无论过程的 初始状态和初始决策是什么，其余的决策都必须相对于初始决策 所产生的状态构成一个最优决策序列。 对于一个多阶段过程问题，上述最优决策是否存在依赖于该问题是否 有最优子结构性质：原问题的最优解包含了其子问题的最优解。而能 否采用动态规划的方法还要看该问题的子问题是否具有重叠性质。后 面将会看到问题的子结构性质和子问题重叠性质是采用动态规划算 法的两个基本要素。先看两个例子： 例1． 多段图问题 设 G=(V,E)是一个赋权有向图，其顶点集 V 被划分成 k2 个不相 交的子集 Vi : 1≤i≤k ，其中，V1 和 Vk 分别只有一个顶点 s(称为源)和一 个顶点 t(称为汇) ，图中所有的边(u,v)的始点和终点都在相邻的两个子 集 V 和 V ＋ 中：u ∈V ，v ∈V ＋ 。 i i 1 i i 1 V1 V2 V3 V4 V5 9 2 4 6 9 4 4 6 2 5 7 3 2 S 7 3 2 t 1 7 10 12 3 1 4 11 5 2 5 11 8 6 11 5 8 一个 5 阶段的网络图 多阶段图问题：求由 s 到 t 的最小成本路径。 对于每一条由 s 到 t 的路径，可以把它看成在 k-2 个阶段作出的某个 决策序列的相应结果：第 i 步决策就是确定 Vi+1 中那个顶点在这条路 径上。今假设 s, v , v , … , v , t 是一条由 s 到 t 的最短路径，再假定 2 3 k-1 从源点 s(初始状态)开始，已经作出了到顶点 v2 的决策(初始决策),则 v2 就是初始决策产生的状态。若将 v2 看成是原问题的子问题的初始 状态，解这个子问题就是找一条由 v2 到 t 的最短路径。事实上，这条 最短路径一定是 v