第五章 动态规划.pptx

第五章动态规划

DynamicProgramming;5.1动态规划数学模型

MathematicalModelofDP;v2;4;动态规划问题的基本特征;动态规划基本原理是将一个问题的最优解转化为求子问题的最优解，研究的对象是决策过程的最优化，其变量是流动的时间或变动的状态，最后到达整个系统最优。;（1）阶段(Stage)：表示决策顺序的时段序列，阶段可以按时间或空间划分，阶段数k可以是确定数、不定数或无限数;(4)策略(Strategy)：P1,n(s1)从第1阶段开始到最后阶段全过程的决策构成的序列称为策略，第k阶段到最后阶段的决策序列Pk,n(sk)称为

k-子策略。;k阶段指标函数;动态规划要求过程指标满足递推关系;动态规划数学模型由式(5-3)或(5-5)、边界条件及状态转移方程构成。如连和形式的数学模型;对于可加性指标函数，上式可以写为;例1用逆序法列表求引例;;;;5.2资源分配问题

ResourceAssignmentProblem;例2:公司有资金8万元，投资A、B、C三个项目，一个投资单位为2万元。每个项目的投资效益率与投入该项目的资金有关。三个项目A、B、C的投资效益(万元)和投入资金（万元）的关系如下表。求对三个项目的最优投资分配，使总投资效益最大。;阶段k：每投资一个项目作为一个阶段，k=1,2,3,4。k=4为虚设的阶段

状态变量sk：投资第k个项目时拥有的资金数

决策变量xk：第k个项目的投资额

决策允许集合：0≤xk≤sk

状态转移方程：sk+1=sk－xk

阶段指标：vk(sk，xk)见表中数据;k=4，终端条件f4(s4)=0。k=3，0≤x3≤s3，s4=s3－x3;s2;k=1，0≤x1≤s1，s2=s1－x1;5.3生产与存储问题

Productionandinventoryproblem;例3:一个工厂生产某种产品，1～6月份生产成本和产品需求量的变化情况见下表;解：动态规划求解过程如下。

阶段k：月份，k=1,2,…,7

状态变量sk：第k个月初的库存量

决策变量xk：第k个月的生产量

状态转移方程：sk+1=sk+xk－dk;当k=6时，因为s7=0，有;;显然该决策不可行。因求得x4=65-s4，则s4+x4=65，而s5=s4+x4－d4=65-40=25，与条件s525矛盾。因此有;29;当k=2时，由;;x1=20，s2=s1+x1－d1=0+20－20＝0，

x2=80，s3=s2+x2－d2=0+80－30＝50，

x3=85－50＝35，s4=s3+x3－d3=50+35－35＝50＞40，

x4＝0，s5=50－0－40＝10＜25，

x5＝25－s5＝15，s6=10＋15－25＝0，

x6＝45。

总成本为2876;月份(k);34;5.4背包问题

KnapsackProblem;5.4背包问题;;s3;s2;第2阶段的最优决策如下;s1;42