《数据丶模型与决策_(第二版)》第六章：动态规划.pdf

第六章动态规划 第六章动态规划 第六章动态规划 数据、模型与决策(第二版) 学习目标 学习目标 • 动态规划是解决多阶段决策过程最优化 问题的一种方法。 • 明确什么是多阶段的决策问题；理解动 态规划的基本思想和基本方程；理解动 态规划的最优性原理和最优性定理。 • 掌握动态规划在资源分配问题、生产和 存贮问题、采购问题中的应用，并学会 使用动态规划方法分析和解决实际的问 第六章动态规划 数据、模型与决策(第二版) 题。 第六章动态规划 第六章动态规划 • 动态规划（Dynamic Programming ，简称DP ）是运 筹学的重要分支之一，它是一种研究多阶段决策问题 的最优化理论和方法。大约产生于50年代。1951年美 国数学家贝尔曼（R.Bellman ）等人，根据一类多阶段 决策问题的特点，把多阶段决策问题变为一系列互相 联系单阶段问题，然后逐个加以解决。 • 动态规划的方法，在工程技术中、企业管理、工农业 生产及军事等部门都有广泛的应用，并且获得了显著 的效果。 • 动态规划模型的分类，根据多阶段决策过程的时间变 量是离散的还是连续的变量，过程分为离散决策过程 第六章动态规划 数据、模型与决策(第二版) 和连续决策过程。 第六章动态规划 第六章动态规划 • 6.1 动态规划的基本概念和基本方程 • 6.2 动态规划应用举例 第六章动态规划 数据、模型与决策(第二版) 6.1 动态规划的基本概念和 6.1 动态规划的基本概念和 基本方程 基本方程 • 6.1.1 多阶段决策 • 6.1.2 动态规划的基本概念 • 6.1.3 动态规划的基本方程 • 6.1.4 动态规划的基本思想归纳 • 6.1.5 动态规划的最优性原理和最优性定 理 第六章动态规划 数据、模型与决策(第二版) 6.1.1 多阶段决策 6.1.1 多阶段决策 • 多阶段决策问题：把一个问题可看作一 个前后关联具有链状结构的多阶段过程 就称为多阶段决策过程，也称序贯决策 过程。 第六章动态规划 数据、模型与决策(第二版) 最短路问题 最短路问题 • 下图是一个线路网络图，代表待定的输油管可行路线，A ，B，C 代表经过的三个地区，每个地区都有若干个转运点，构成许多不 同的输油路线，转运点间的数字表示点间距离，问应选择那些路 线，使总路线最短？ 第六章动态规划 数据、模型与决策(第二版) 6.1.2 动态规划的基本概念 6.1.2 动态规划的基本概念 • 阶段 • 状态 • 决策 • 策略 • 状态转移方程 • 指标函数和最优值函数 第六章动态规划 数据、模型与决策(第二版) 6.1.3动态规划的基本方程 6.1.3动态规划的基本方程 • 动态规划的方法是从终点逐段向始点方向寻找最短路线的一种方法。 • 当k=4 时，由D 到终点E只有一条路线，故f （D ）=4， 同理， 1 4 1 f （D ）=3。 4 2 • 当k=3 时，出发点有C ，C ，C 三个。若从C 出发，则有两个选择，一 1 2 3 1 是至D ，一是至D