第六章 动态规划.pdf

第六章第六章第六章第六章动态规划动态规划动态规划动态规划 第六章动态规划 数据、模型与决策(第二版) 学学学学习目习目标标标标 • 动态规划是解决多阶段决策过程最优化 问题的的一种种方法法。 •• 明确什么是多阶段的决策问题明确什么是多阶段的决策问题；；理解动理解动 态规划的基本思想和基本方程；理解动 态规划的最优性原理和最优性定理态规划的最优性原理和最优性定理。 • 掌握动态规划在资源分配问题、生产和 存贮问题、采购问题中的应用，并学会 使用动态规划方法分析和解决实际的问使用动态规划方法分析和解决实际的问 第六章动态规划 数据、模型与决策(第二版) 题。 第六章第六章第六章第六章动动态规划态规划态规划态规划 • 动态规划（Dynamic Programming，简称DP ）是运 筹学的重要分支之一筹学的重要分支之一，它是一种研究多阶段决策问题它是一种研究多阶段决策问题 的最优化理论和方法。大约产生于50年代。1951年美 国数学家贝尔曼国数学家贝尔曼 （R.Bellman ）等人等人，根据根据一类多阶段类多阶段 决策问题的特点，把多阶段决策问题变为一系列互相 联系单阶段问题，然后逐个加以解决。 • 动态规划的方法，在工程技术中、企业管理、工农业 生产及军事等部门都有广泛的应用，并且获得了显著 的效果的效果。 • 动态规划模型的分类，根据多阶段决策过程的时间变 量是离散的还是连续的变量量是离散的还是连续的变量，过程分为离散决策过程过程分为离散决策过程 第六章动态规划 数据、模型与决策(第二版) 和连续决策过程。 第六章第六章第六章第六章动动态规划态规划态规划态规划 • 6.1 动态规划的基本概念和基本方程 • 6.2 动态规划应用举例 第六章动态规划 数据、模型与决策(第二版) 6666..1111 动态规划的基本概念和动态规划的基本概念和动态规划的基本概念和动态规划的基本概念和 基本方基本方程程 • 6.1.1 多阶段决策 • 6.1.2 动态规划的基本概念 •• 66.11.33 动态规划的基本方程动态规划的基本方程 • 6.1.4 动态规划的基本思想归纳 • 6.1.5 动态规划的最优性原理和最优性定 理理 第六章动态规划 数据、模型与决策(第二版) 6.1.16.1.1 多阶多阶多阶多阶段段决策决策决策决策 • 多阶段决策问题：把一个问题可看作一 个前后关联具有链状结构的多阶段过程 就称为多阶段决策过程就称为多阶段决策过程，，也称序贯决策也称序贯决策 过程。 第六章动态规划 数据、模型与决策(第二版) 最最短路短路短路短路问问题题 • 下图是一个线路网络图，代表待定的输油管可行路线，A ，B，C 代表经过的三个地区代表经过的三个地区，，每个地区都有若干个转运点每个地区都有若干个转运点，，构成许多不构成许多不 同的输油路线，转运点间的数字表示点间距离，问应选择那些路 线，使总路线最短？ 第六章动态规划 数据、模型与决策(第二版) 6.1.26.1.2 动动态规划的态规划的态规划的态规划的基基本概念本概念本概念本概念 • 阶段 • 状态 •• 决策决策 • 策略 • 状态转移方程 •• 指标函数和最优值函数指标函数和最优值函数 第六章动态规划 数据、模型与决策(第二版) 6.1.36.1.3动动态规划的态规划的态规划的态规划的基基本本本本方方程程 • 动态规划的方法是从终点逐段向始点方向寻找最短路线的一种方法。 • 当当kk=44 时时，，由由DD 到终点到终点EE只有只有一条路线条路线，，故故ff （（DD ））=44 ，， 同理同理，，