运筹学——动态规划.pptVIP

Yunchouxue ;以最短路问题为例，来说明动态规划的概念;一、动态规划基本概念：;2、状态及性质;3、决策和策略;策略;状态转移方程;指标函数;指标函数的常见形式：;回到例1;⑴阶段 从网络图中可看到问题可分为k=5段. ⑵状态 由A-F分为5段,存在6种状态允许集:S1-S6 S1={A},S2={B1,B2}, S3={C1,C2,C3,C4}, S4={D1,D2,D3}, S5={E1,E2}, S6={F} ;⑶例1中的决策允许集 D1(A)={B1,B2} D2(B1)={C1,C2,C3} D2(B2)={C2,C3,C4} D3(C1)={D1,D2}, …D3(C4)=? D4(D1)={E1,E2},D4(D2)= {E1,E2} D5(E1)={F}, D5(E2)={F} ;⑷状态转移方程 例1中的状态转移方程sk+1=uk(sk) 如: s3=u2(B1)=C2. ⑸指标函数 例1中的指标函数是距离,(是数值) V2,5(B1)=13 ⑹最优值函数fk(sk), 例1中f5(E2)=3.;二、动态规划的基本思想和基本方程;;;动态规划的基本方程（一）;动态规划的基本方程（二）;动态规划方法的基本思想P197;最短路问题的图上作业法——标号法;B1;动态规划的最优性定理;三、动态规划与静态规划的关系;1、动态规划模型的建立;动态规划的求解方法有两种： 逆序解法与顺序解法 ;3、两种解法在建模时的区别如下表所示;顺序解法解例1：;B1;四、资源分配问题;1、一维资源分配问题;建立动态模型的6个要素：（提问）;分析：;一维资源分配问题动态规划模型为：;例2：某有色金属公司拟拨出50万元对所属三家冶炼厂进行技术改造。若以10万元为最小分割单位，各厂收益与投资的关系如下： 公司经理从定量决策的需要出发，要求公司的系统分析组求出：对三个工厂如何分配这50万元，才能使总收益达到最大？ ;投资额;最大盈利：f3(s3)=g3(x3)+f4(s4).;最大盈利为： f2(s2)= ;最大盈利为： f1(s1)= ;[例3].某公司有资金10万元，若投资项目i（i=1,2,3）的投资额为 时,其效益分别为: 问应如何分配投资数额才能使总收益最大? 可列出它的静态模型: ;解：;;当k=2时, ;;减函数;45;2、资源连续分配问题;一般提法：设有某种资源，初始的拥有量是M。计划在A，B两个生产部门连续使用n个阶段。已知在部门A投入资源uA时的阶段收益是g(uA)，在部门B投入资源uB时的阶段收益是h(uB)。又资源在生产中将有部分消耗，已知每生产一个阶段后部门A、B中的资源完好率分别为a和b，0a、 b1。求n阶段间总收益最大的资源分配计划。 ;阶段变量k＝1、2…n 状态变量sk为阶段k初拥有的资源量0≤sk≤M，s1=M 决策变量选uk,为阶段k在部门A的资源投放量，即uA=uk，显然有uB=sk- uk， 0≤uk≤sk 状态转移方程sk+1=auk+b(sk-uk) 阶段指标函数 rk(sk,uk)=g(uk)+h(sk-uk) 指标递推方程：目标函数是n个阶段的总收益，即阶段指标函数求和。 ;例4 今有1000台机床，要投放到A、B两个生产部门，计划连续使用3年。已知对A部门投入uA台机器时的年收益是g(uA)=4(uA)2元，机器完好率a=0.5，相应的B部门的年收益是h(uB)=2(uB)2 元，完好率b= 0.9。试求使3年间总收益最大的年度机器分配方案。 ;解 ： 阶段变量K=1、2、3 状态变量sk，为该年度初完好的设备数， 决策变量uk，为该年度投入A活动的设备数，则有0≤sk≤1000， 0≤uk≤sk 状态转移方程为：sk+1=0.5uk+0.9(sk-uk) 阶段指标函数： g(uA)＋ h(uB) 递推指标函数：;k=3时，0≤u3≤s3，有 ;k=1时，0≤u1≤s1， s2=0.5u1+0.9(s1-u1)，;例4：用动态规划解下列规划问题：p204 Maxz=x1.x22.x3 x1+x2+x3=c (c0) x1,x2,x3≥0 解：按问题变量的个数划分阶段， 阶段k＝1，2，3；状态变量为s1,s2,s3;且s1＝c； 决策变量为x1,x2,x3；状态转移方程为sk+1＋ xk =sk, 阶段指标函数gk(xk)表示为x1,x22,x3 设， s3＝ x3， s3＋ x2 ＝