《运筹学》胡运权清华版-7-01动态规划_417复习课程.pptVIP

第七章 动 态 规 划 多阶段决策问题 动态规划的基本概念和基本原理 动态规划模型的建立 逆推解法与顺推解法 动态规划应用举例 在多阶段决策问题中，阶段往往可用时段来表示，随着时间的推移，在每一时段上选择最恰当的决策，以期在整体上达到最优。动态规划是解决多阶段决策过程的方法。 R. Bellman50年代执教于普林斯顿和斯坦福大学，1957年发表“Dynamic Programming”一书，标识动态规划的正式诞生。 1 2 n ? 状态 决策 状态 决策 状态 状态 决策 A B1 B2 C1 C2 C3 C4 D1 D2 D3 E1 E2 F 5 4 2 3 6 8 7 7 8 4 4 3 5 4 8 5 3 1 3 5 6 2 4 3 1 2 3 4 5 5阶段决策问题 例4. 最短路问题 如何求解最短路问题？ （1）最短路问题的特点： 若 A－ B1－ C2－ D2－ E2－F 是从A到F的最短路， 则必有 B1－ C2－ D2－ E2－F 是从B1到F的最短路， C2－ D2－ E2－F 是从C2到F的最短路， D2－ E2－F 是从D2到F的最短路， E2－F 是从E2到F的最短路 即：若某一点在最优路线上，那么从那一点到终点的最短路线也在最优路线上。 （2）解决最短路问题的方法： 假设每一个点都在最优路线上，然后做相关计算。 具体地：从最后阶段的两个始点E1和E2开始，由后向前，计算每一个点到F的最短路线，直到结点A，这时找到A到F的最短路。 A B1 B2 C1 C2 C3 C4 D1 D2 D3 E1 E2 F 5 4 2 3 6 8 7 7 8 4 4 3 5 4 8 5 3 1 3 5 6 2 4 3 3 4 最短路问题的求解 1 2 3 4 5 A B1 B2 C1 C2 C3 C4 D1 D2 D3 E1 E2 F 5 4 2 3 6 8 7 7 8 4 4 3 5 4 8 5 3 1 3 5 6 2 4 3 3 4 5 7 5 1 2 3 4 5 A B1 B2 C1 C2 C3 C4 D1 D2 D3 E1 E2 F 5 4 2 3 6 8 7 7 8 4 4 3 5 4 8 5 1 2 3 4 5 7 5 12 10 8 9 1 2 3 4 5 A B1 B2 C1 C2 C3 C4 D1 D2 D3 E1 E2 F 5 4 2 3 6 8 7 7 1 2 3 4 5 7 5 12 10 8 9 13 15 1 2 3 4 5 A B1 B2 C1 C2 C3 C4 D1 D2 D3 E1 E2 F 5 4 1 2 3 4 5 7 5 12 10 8 9 13 15 17 1 2 3 4 5 A B1 B2 C1 C2 C3 C4 D1 D2 D3 E1 E2 F 1 2 3 4 5 7 5 12 10 8 9 13 15 17 注：同时得到所有顶点到终点最短路。 1 2 3 4 5 用动态规划求解最短路问题的思路 将大问题分成结构相似的小问题，递推求解。 最短路问题： A B1 B2 C1 C2 C3 C4 D1 D2 D3 E1 E2 F 5 4 2 3 6 8 7 7 8 4 4 3 5 4 8 5 3 1 3 5 6 2 4 3 1 2 3 4 5 子问题1—— 在第5阶段应怎样走，使得第5阶段初各起点E1、E2到终点F的路长最短？ A B1 B2 C1 C2 C3 C4 D1 D2 D3 E1 E2 F 5 4 2 3 6 8 7 7 8 4 4 3 5 4 8 5 3 1 3 5 6 2 4 3 1 2 3 4 5 子问题2—— 根据上一步的结果，在第4阶段应怎样走，使得第4阶段初各起点D1、D2、D3到终点F的路长最短？ A B1 B2 C1 C2 C3 C4 D1 D2 D3 E1 E2 F 5 4 2 3 6 8 7 7 8 4 4 3 5 4 8 5 3 1 3 5 6 2 4 3 1 2 3 4 5 子问题3—— 根据上一步的结果，在第3阶段应怎样走，使得第3阶段初各起点C1、C2、C3、C4到终点F的路长最短？