运筹学课件-动态规划.pptxVIP

动态规划2025/5/8运筹学课件多阶段决策问题与动态规划01动态规划的基本概念02动态规划的步骤03动态规划的应用04求解静态规划问题05资源分配问题06不确定性采购问题07排序问题08

8.1多阶段决策问题与动态规划2025/5/8运筹学课件动态规划所研究的对象是多阶段决策问题。所谓多阶段决策问题是指一类活动过程，它可以分为若干个相互联系的阶段，在每个阶段都需要作出决策。这个决策不仅决定这一阶段的效益，而且决定下一阶段的初始状态。每个阶段的决策确定以后，就得到一个决策序列，称为策略。多阶段决策问题就是求一个策略，使各阶段的效益的总和达到最优。

古代有3位商人各自带了一个仆人外出来到了一个渡口,渡口只有一条小船每次只能乘2人,仆人私下约定只要岸上的仆人人数超过商人人数,就可杀人越货.但是过河的决策由商人制定.问商人如何安全的渡过河去?安全过河问题

运筹学课件2025/5/8

8.1多阶段决策问题与动态规划2025/5/8运筹学课件一、多阶段决策问题1.时间阶段的例子（机器负荷问题）某厂有1000台机器，现需作一个五年计划，以决定每年安排多少台机器投入高负荷生产（产量大但损耗也大）可使五年的总产量最大。12345S1=1000x1x2x5x4x3s5v1v2v3v4v5s2s3s4

2025/5/8运筹学课件2.空间阶段的例子（最短路问题）

如图为一线路网络。现要从A点铺设一条管道到E点，图中两点间连线上数字表示两点间距离。现需选一条由A到E的铺管线路，使总距离最短。AEB1B2B3C1C2C3D1D229531225156468101312111410阶段1阶段2阶段3阶段4

解决问题的基本特征动态规划2025/5/8运筹学课件动态规划一般解决最值（最优，最大，最小，最长……）问题；01动态规划解决的问题一般是离散的，可以分解（划分阶段）的；02动态规划解决的问题必须包含最优子结构，即可以由（n－1）的最优推导出n的最优03

动态规划模型的分类：01以“时间”角度可分成：02离散型和连续型。03从信息确定与否可分成：04确定型和随机型。05从目标函数的个数可分成：06单目标型和多目标型。07

8.2基本概念与方程2025/5/8运筹学课件1.基本概念阶段（Stage）——分步求解的过程，用阶段变量k表示，k=1，，n状态（State）——每阶段初可能的情形或位置，用状态变量Sk表示。按状态的取值是离散或连续，将动态规划问题分为离散型和连续型。决策（Decision）——每阶段状态确定后的抉择，即从该状态演变到下阶段某状态的选择，用决策变量xk表示。状态转移——由Sk转变为Sk+1的规律，记Sk+1=T(Sk，xk)。策略（Policy）——由各阶段决策组成的序列，记P1n={x1，…，xn}，称Pkn={xk，…，xn}为阶段k至n的后部子策略。

2025/5/8运筹学课件当前状态以前状态决策显然,从上图可以看出,当前状态通过决策,回到了以前状态.可见决策其实就是状态之间的桥梁。而以前状态也就决定了当前状态的情况。KSkSk+1XkVk

过河:决策向量xk(I,J)初始状态s1是T(3,3)结束状态sn是T(0,0)可达状态有哪些?(3,J)(2,2)(1,1)(0,J)0321123AJII表示留在左岸的商人人数J表示留在左岸的仆人人数

阶段指标——每阶段选定决策xk后所产生的效益，记1vk=vk(Sk，xk)。2指标函数——各阶段的总效益，记相应于Pkn的指标函数3为vkn=vkn(Sk，Pkn)。其中最优的称最优4指标函数，记fk=fk（Sk）=optvkn。5问题：动态规划的最优解和最优值各是什么？6——最优解：最优策略P1n，7最优值：最优指标f1。8

多阶段决策过程2025/5/8运筹学课件d1d2dNs1s2s3?sNsN+112