第5章_动态规划5.1.pdf

第5章 动态规划 • §5.1动态规划的基本概念和基本原理 • §5.2动态规划模型的建立 • §5.3动态规划的求解 • §5.4动态规划的应用举例 某些决策问题过程可以分为几个相互联系的阶段，每个阶段 都有若干种方案可供选择，而决策的任务就是在每个阶段选择一 个合适的方案，从而使得整个决策方案取得最优效果。这就是多 阶段决策问题。 1951 年美国数学家贝尔曼（R.Bellman）等人，根据 一类多阶段决策问题的特点，把它变换为一系列相互 联系的单阶段决策问题加以解决。他提出了解决这类 问题的最优性原理，创建了解决多阶段决策过程最优 化的一种新方法——动态规划，形成了运筹学的一个 重要分支。动态规划自问世以来，在工程技术、企业 管理和最优控制等方面都有广泛的应用。 如最优路径问题、生产调度问题、库存管理 问题、设备更新问题等等。许多问题用动态 规划的方法去处理，往往比线性规划或非线 性规划更有效，特别是对于离散性问题，动 态规划可以发挥其所长而成为非常有用的工 具。动态规划是求解某一类问题的一种方 法，它必须对问题进行具体分析处理。 本章首先介绍动态规划的基本概念与基本原 理，然后介绍动态规划的模型和求解方法， 最后通过一些典型的动态规划模型来介绍它 的应用。 §5.1动态规划的基本概念和基本原理 §5.1.1 多阶段决策 决策 决策 决策 状态 1 状态 2 状态 L 状态 n 状态 图5.1.1 如图5.1.1，这种把一个问题可看作一个前后关联具有链状 结构的多阶段过程的决策就称为多阶段决策过程，也称为 序贯决策过程。这种使整个活动过程的总体效果达到最优 的相关问题称为多阶段决策问题。 多阶段决策问题的目标：使整个过程达到最优 解决多阶段决策问题的方法：动态规划方法 一般来说，各阶段采取的决策都与时间有关， 决策依赖于当前的状态，又随即引起状态的转移， 一个决策序列就是在变化的状态中产生出来的，故 有“动态的”含义。一些与时间没有关系的静态规划 （如线性规划、非线性规划等）问题， 引入“时间”要 素，亦可把它视为多阶段决策问题， 用动态规划方法 处理。 例5.1.1 （最短路问题） 假设要从A 城市到E城市铺设一条输油管道，中间需要经 过三个地区，每个地区都有若干个转运站，构成了许多不 同的输油路线，转运站间的数字表示站间的运输路径的长 度，由于地理条件等原因，某些地区之间不能直接铺设相 通的管道。现需求出一条使总路径最短的管道路线。 7 B 1 C1 3 6 3 9 5 D 1 4 5 5 4 A B2 C2 E 2 3 3 7 3 6 D2 8 9 B3 C3