数学建模动态规划课件.pptVIP

西安电子科技大学 2010数模培训 动态规划Trends Program /Programming Dynamic 唐厚俭 hjTang@xidian.edu.cn 目录 引例——最短路问题 动态规划基本概念、模型与方法 例题1：载货问题/背包问题 例题2：生产问题 例题3：采购与库存 例题4：加工顺序问题 总结 参考书目 课后习题 引例：求A?G的最短线路 用同一符号改写 问题的解 动态规划的基本概念 阶段与阶段变量 一个问题需要作出决策的步骤 描述阶段的变量称为阶段变量，常用k表示 状态与状态变量(Status) 每个阶段都有一些特征，即状态 第k阶段的状态变量用sk来表示 决策与决策变量 过程处于某一阶段时可以做出不同的决定 用xk(sk)表示k阶段sk所做的决策 在k阶段sk状态所有允许决策集合用 Dk(sk)表示 (Strategy, Policy) 策略 按顺序排列的决策组成的集合 k子过程 由第k阶段开始到终止状态的过程 pk,n(sk) = {xk(sk), …, xn(sn)} – k子过程策略 k=1时为全过程策略 状态转移函数(Transform) 如果给定第k阶段状态变量sk和该阶段的决策变量xk(sk)，则k+1阶段的状态变量sk+1的值也随之确定，即sk+1随sk和xk(sk)的变化而变化，记： sk+1 = Tk(sk, xk(sk)) 称为状态转移方程 vk(sk, xk) =f(Tk(sk, xk(sk)))为转移费用value 指标函数(回收函数) 用来衡量所实现过程优劣的一种数量指标 它定义在全过程或所有后部子过程上的数量函数: 最优值函数 optimal value function 从第k阶段的状态sk开始到第n阶段的终止状态sn+1的过程, 采用最优策略(optimal policy)所得到的指标函数称为最优值函数，记为fk(sk) (k=1,2,…,n) 动态规划基本条件 1) 将问题转化为n个阶段 2) 正确选择状态变量sk, 使它既能表达过程，又无后效性和可知性 后效性：以后过程的发展不受以前各阶段的影响 可知性：规定的各阶段状态变量的值是可知的 3) 确定决策变量xk及每一个阶段的允许决策集合 4) 写出状态转移方程：sk+1=Tk(sk, xk) 5) 正确写出指标函数Vk,n的关系 Vk,n具有可分离性和递归关系 函数 是关于Vk+1,n的严格单调的 动态规划的基本模型 逆序解法模型 顺序解法模型 逆序解法模型 指标函数形式 动态规划的求解方法 示例：用逆推法求解 分析 将其看着三阶段的决策问题： 有三个决策，且决策是连续函数，因此求最大值一般用到微分 令 练习(正推) 动态规划应用案例分析 例1 载货问题 设有一辆载重为15t的卡车，要装运4种货物，已知4种货物的单位重量和价值如表所示，在载重许可的条件下每辆车载某种货物的条件不限，试问应如何搭配才能使装载的价值最大？ 设决策变量x1, x2, x3, x4分别为4种货物的转载件数，问题用线性整数规划： 用动态规划方法 将其转化为四个阶段，各阶段标记的指标函数为 状态变量 : 第k种至第4种货物允许载重重量 允许的状态集合为 最优值函数 状态转移方程为 允许决策集合为 逆顺序法求解过程 1) k=4 2) k=3 3) k=2 4) k=1 讨论最大值 最大值点：sk=15时，值为22 背包问题 有人带背包上山，其可携带的物品容量限度为a ml.设有n种物品可供他选择，设其编号为1,2,…,n,已知第i重物品单个容积为ci ml，在他上山后的利润是携带数量xi的函数mi(xi)。 试问此人应该如何选取携带物品所得的利润最大 例题 例2: 生产问题 某工厂购进1000台机器，准备生产P1, P2两种产品。生产P1每台机器可收入50万，损坏率达65%；生产P2每台机器可收入40万，损坏率只有40%；估计3年后将有新的机器出现，旧的全部淘汰。试问：应如何安排生产，使3年内收入最多？计划以1年为周期。 整数规划： 设x1, x2, x3分别表示第1，2，3年生产P1的机器数量，y1,y2,y3表示生产P2的机器数量 设fk(n)为n台机器在k年内的最大收益，若只安排一年的生产，x3为生产P1的机器数目 k=1即1年后的最大收益 k=2即2年后的最大收益 最后考虑k=3即考虑3年的生产，第一年生产P1的机器数目设为x1，则 例3：采购与库存安排 某公司需要制定一种产品今后四个时期的采购计划，根据市场预测在今后的四个时期内，该产品的需求量分别为{2,3,2,4}。如果每批产品的固定采购成本费为3万元，若不采购成本为0元；每单位产品的成本价为1万元；每个时期所允许