动态最优化第11讲 动态规划的基本概念和原理.pdfVIP

动态最优化方法 ——第11讲 动态规划的基本概念和原理 第十一讲 动态规划的基本概念和原理  什么是动态规划： 动态规划是用来解决多阶段决策过程最优化的一种数量 方法。其特点在于，它可以把一个n 维决策问题变换为 几个一维最优化问题，从而一个一个地去解决。 需指出：动态规划是求解某类问题的一种方法，是考 察问题的一种途径，而不是一种特殊的算法。必须对具 体问题进行具体分析，运用动态规划的原理和方法，建 立相应的模型，然后再用动态规划方法去求解。 第十一讲 动态规划的基本概念和原理  （一）多阶段决策问题 多阶段决策问题： 是动态决策问题的一种特殊形式； 在多阶段决策过程中,系统的动态过程可以按照时间进程 分为状态相互联系而又相互区别的各个阶段； 每个阶段都要进行决策, 目的是使整个过程的决策 达到最优效果。 决策 决策 决策 状态 状态 状态 状态 1 2  n 第十一讲 动态规划的基本概念和原理  （一）多阶段决策问题 多阶段决策问题的典型例子： 1 . 生产决策问题：企业在生产过程中，由于需求是随时间 变化的，因此企业为了获得全年的最佳生产效益，就要在整个生 产过程中逐月或逐季度地根据库存和需求决定生产计划。 2.航天飞机飞行控制问题：由于航天飞机的运动的环境是 不断变化的，因此就要根据航天飞机飞行在不同环境中的情况， 不断地决定航天飞机的飞行方向和速度 （状态），使之能最省燃 料和实现目的 （如软着落问题）。 3. 线性规划、非线性规划等静态的规划问题：可以通过 适当地引入阶段的概念，应用动态规划方法加以解决。 第十一讲 动态规划的基本概念和原理  （一）多阶段决策问题 4 . 最短行走路径问题：给定一个交通网络图如下，其中 两点之间的数字表示距离（或花费），试求从A点到G点的最 短距离（总费用最小）。 C1 6 1 2 B1 3 3 8 D1 E1 3 5 6 C2 5 2 5 F1 4 5 A 8 3 D2 1 E2 2 G 2 3 3 B2 76 C3 834 D3 33 E3 6 6 F2 C4 0 1 2 3 4 5 6 第十一讲 动态规划的基本概念和原理  （二）基本概念 （1）阶段： 把一个问题的过程，恰当地分为若干个相互联系的阶段， 以便于按一定的次序去求解。 描述阶段的变量称为阶段变量k 。阶段的划分，一般是 根据时间和空间的自然特征来进行的，但要便于问题转化为 多阶段决策。 最短行走路径例子：从点F到点G共分为了6个相互联系的阶 段，记为：k = 0,1,……,5 （对于n阶段的问题，k = 0,1,……,n-1 ） 第十一讲 动态规划的基本