第五章动态规划.pptVIP

第5章动态规划多阶段决策问题最优化原理确定性的定期多阶段决策问题§5.2最优化原理递推法求解最短线路问题最优化原理O)yuyingzhao@运筹学千里之外决胜帷幄之中运筹主讲教师赵玉英北京林业大学理学院§5.1多阶段决策问题多阶段决策问题实例多阶段决策问题的分类从A地到D地要铺设一条煤气管道,其中需经过两级中间站，两点之间的连线上的数字表示距离，如图所示。问应该选择什么路线，使总距离最短？AB1B2C1C2C3D24333321114状态x1决策阶段1状态x2阶段2决策状态x4状态x3阶段3决策行程1行程2行程31多阶段决策问题实例（1）1多阶段决策问题实例（2）今有1000台机床，要投放到两个生产部门，计划连续使用5年，已知对A部门投入uA台机器的年收益为g(uA)=uA2机器完好率a=0.8；相应的B部门分别为h(uB)=2uA2，机器完好率b=0.4。试建立5年间总收益最大的机器分配方案。问题的数学模型为：状态x1决策第一次阶段1状态x2第二次阶段2决策状态x5状态x3第五次阶段5决策收益1收益2收益51多阶段决策问题实例（2）某工厂制定某种季节性商品的生产计划，假定全年共有6个生产周期，每个周期的市场需求如下表：850301055需求654321周期生产计划受到的限制：若仅日班生产,每周期生产15单位,成本100元/单位；若日夜两班,则夜班也可以生产15单位,成本120/单位；淡季要存储一些产品,以备旺季销售,存储成本16元/单位/周期，开始时存储为0,年终不再存储。如何安排生产和存储计划使总费用最小？1多阶段决策问题实例（3）设第i个周期生产量为xi,存储量为ui,则问题的数学模型为：总生产费用总储存费用每一周期的生产量和上一周期的存储量之和等于本周期的销售量和存储量之和日夜生产的总产量限制其中：1多阶段决策问题实例（4）有一个系统，可以分成若干个阶段，任一个阶段k系统的状态可以用xk表示。在每一阶段k的每一状态xk都有一个决策集合Qk(xk),在决策集合Qk(xk)中选定一个决策qk∈Qk(xk),状态xk就转移到新的状态xk+1=Tk(xk,qk)，并且得到收益Rk(xk,qk)阶段。我们的目的就是在每一个阶段都在它的决策集合中选择一个决策，使得所有阶段的总效益∑Rk(xk,qk)达到最优。称之为多阶段决策问题。多阶段决策问题的基本要素：阶段数、状态变量、决策变量、状态转移方程、目标函数等。2多阶段决策问题分类根据阶段数划分：有限阶段决策问题，无限阶段决策问题；根据变量取值情况划分：连续多阶段决策问题，离散多阶段决策问题；根据阶段个数是否明确划分：定期多阶段决策问题，不定期多阶段决策问题；根据参数取值情况划分：确定多阶段决策问题，不确定多阶段决策问题。1递推法求解最短线路问题AB1B2C1C2C3D24333321114A0A1B1A2B2C2A3D2B3C3A4B4C4A5B5A653236871668353384222133355266431递推法求解最短线路问题A0A1B1A2B2C2A3D2B3C3A4B4C4A5B5A653236871668353384222133355266432最优化原理?给定决策序列（称为策略）如果是最优的，那么最优策略的最后的k个决策，就是后k个阶段组成的k阶段问题的最优策略(最优策略的子策略是最优的)。2最优化原理ACBA到C的最短路B到C的最短路后向递推法§5.3确定性的定期多阶段问题什么叫确定性定期多阶段决策问题？不含随机变量，且给定阶段数的多阶段决策问题旅行售货员问题多阶段资源分配问题1旅行售货员问题某网络共有4个顶点，已知各个顶点之间的路程dij如下表，求从v1出发经过v2v3v4各一次，再返回到v1的最短路程和最短线路。0879v45097v35806v26580v1v4v3v2v1v4到v2的距离v2到v4的距离问题特征：由于走过的点不需要再走，所以在每一个点的决策集合和以前的决策有关；(vi,