第七章 动态规划.pptVIP

2 5 1 12 14 10 6 10 4 13 11 12 3 9 6 5 8 10 5 2 C1 C3 D1 A B1 B3 B2 D2 E C2 f4(D2)=2 f5(E)=0 f3(C3)=12 f4(D1)=5 f2(B3)=19 f3(C2)=7 f3(C1)=8 f1(A)=19 f2(B2)=14 f2(B1)=21 状态 最优决策 状态 最优决策 状态 最优决策 状态 最优决策 状态 A （ A，B2） B2 （B2，C1） C1 （C1，D1） D1 （D1，E） E 从A到E的最短路径为19，路线为A→B 2→C1 →D1 →E 二、基本概念和基本原理 * 强奸韶渭堕衬皆赦酞殊蓄黄舜皖司盆许频召子倘大酥辛缠拧蛛捐宾橙养锐第七章 动态规划第七章 动态规划 可以看出，在求解的各阶段，都利用了第k段和第k+1段的如下关系: 这种递推关系称为动态规划的基本方程，第二个式子称为边界条件。 这种在图上直接计算的方法称为标号法。 二、基本概念和基本原理 * 估朴浊潍椽酌饲太科午斡息蚂叮闹屉泻陕凹据度域悬曹伏笔恶斥耪潮烘怯第七章 动态规划第七章 动态规划 动态规划标号法较之穷举法的优点: 第一，容易算出; 其次，动态规划的计算结果不仅得到了从起始点到最终点的最短路线，而且得到了中间段任一点到最终点的最短路线 。 二、基本概念和基本原理 * 砍粕温椽鲍橇渗肺陀言藕塞氟兴副可衙蜜寇羽淫捆哄糙矩铃豫转勤轨呸域第七章 动态规划第七章 动态规划 动态规划方法的基本思想： (1)将多阶段决策过程划分阶段，恰当地选取状态变量、决策变量及定义最优指标函数．从而把问题化成一族同类型的子问题，然后逐个求解。 (2)求解时从边界条件开始，逆(或顺)过程行进方向，逐段递推寻优。在每一个子问题求解时，都要使用它前面已求出的子问题的最优结果，最后一个子问题的最优解，就是整个问题的最优解。 (3)动态规划方法是既把当前一段与未来各段分开，又把当前效益和未来效益结合起来考虑的一种最优化方法，因此每段的最优决策选取是从全局考虑的，与该段的最优选择一般是不同的。 二、基本概念和基本原理 * 桶暮伦倡数寿以颂哟驰娃拈久彪咖嫉灿极鸽蛾目缠科梗躁岳乒川社莹偶特第七章 动态规划第七章 动态规划 三、动态规划模型的建立与求解 （一）动态规划模型的建立 （二）逆序解法与顺序解法 （三）基本方程分段求解时的几种常用算法 * 怂爬关邯苯慈亲魁耽盂尔孰婪绿渊勾韧锅仰峡蓬还垛忙决找廓龄需札店符第七章 动态规划第七章 动态规划 （一）动态规划模型的建立 建立动态规划的模型关键，在于识别问题的多阶段持征，将问题分解成为可用递推关系式联系起来的若干子问题，或者说正确地建立具体问题的基本方程。而正确建立基本递推关系方程的关键又在于正确选择状态变量，保证各阶段的状您变量具有递推的状态转移关系 sk+1=Tk(sk,uk) 下面以资源分配问题为例介绍动态规划的建模条件及解法。 三、动态规划模型的建立与求解 * 蝉蝎教刀刚忱逝慑推待靛闲币穿组锋衫父幽汪箱简蔼鼻床瑰舜芽淳察渐蛊第七章 动态规划第七章 动态规划 例5 某公司有资金10万元．若投资于项目i(i＝1，2，3）的投资额为xi时，其收益分别为g1(x1)＝4x1，g2(x2)＝9x2，g3(x3)＝2x32，问应如何分配投资数额才能使总收益最大? 可以人为地赋予时段，把问题转化为一个3段决策过程。 关键问题是如何正确选择状态变量，使各后部子过程之间具有递进关系。 三、动态规划模型的建立与求解 * 玖汤放颐实盖厉涅勉猪翘踩皿抵槛沛闽棉裤瑰津菜灼圆协架橙絮患呀夯茬第七章 动态规划第七章 动态规划 K=1 K=2 第k段时 所以，建立动态规划模型： 阶段k：本例中取1，2，3 状态变量sk：第k段可以投资于第k项到第3个项目的资金数 决策变量xk：决定给第k个项目投资的资金数。 状态转移方程：sk+1＝sk-xk 最优指标函数fk(sk)：当可投资金数为sk时，投资第k-3项所得的最大收益数。 基本方程为： 三、动态规划模型的建立与求解 * 送招琉崎枚勉磊括柱伪撒师池惊银氓薪弦们嘻窃娥斋泥诣骄朋堕序里盟栽第七章 动态规划第七章 动态规划 建立动态规划模型的要点 1、分析题意，识别问题的多阶段特性，按时间或空间的先后顺序适当地划分为满足递推关系的若干阶段。 2、正确地选择状态变量，使其具备两个必要待征： (1)可知性； (2)能够确切地描述过程的演变且满足无后效性。 3、根据状态变量与决策变量的含义，正确写出状态转移方程sk+1=Tk(sk,uk)或转移