运筹学课件6摘要.pptVIP

实际经济社会活动中，许多问题从时间或空间上带有一定的“阶段逻辑”，从而 形成了多阶段的决策问题。动态规划是求解多阶段决策问题的最优化数学方法。 一个决策问题可分解成若干个相互联系的阶段，每个阶段有若干种方案可供选 择。决策的任务是在每个阶段选择一个适当的方案，从而使整个问题取得最优 效果。 动态规划将复杂的多阶段决策问题分解为一系列简单的单阶段决策问题, 通过解 一系列小问题达到求解整个问题目的。 动态规划的各个决策阶段不但要考虑本阶段的决策目标, 还要兼顾整个决策过程 的整体目标, 从而实现整体最优决策。 * HuBei University of Technology 湖北工业大学 第5章 动态规划 * 5.1 多阶段决策问题 多阶段决策问题：是指将一类活动过程分为若干个相互联系的阶段，在每个阶段 都需要作出决策。这个决策不仅决定这一阶段的效益，而且决 定下一阶段的初始状态。 策略：每个阶段的决策确定后，得到的一个决策序列。 多阶段决策问题就是求一个策略，使各阶段的效益的总和达到最优。 5.1 多阶段决策问题 例1：基建投资问题。一家公司有三个工厂，每个工厂都需要进行扩建。公司 用于扩建的资金总共为7万元，各工厂的投资方案及扩建后预期可获得的利润 如表所示。 13 4 11 3 7 2 0 0 三厂 11 4 9 3 3 1 0 0 二厂 10 3 8 2 5 1 0 0 一厂 利润 投资数 利润 投资数 利润 投资数 利润 投资数 方案4 方案3 方案2 方案1 厂名 公司要确定对各厂投资多少，使公司的总利润达到最大？ 每个工厂都有几种投资方案，对每个工厂作出一项决策，共要做出三项决策。 将每个工厂看成一个阶段，就是一个多阶段的决策问题。 5.1 多阶段决策问题 例2：最短路线问题。假设从A到E地要铺设一条管道，其中要经过若干个中间 点。两点之间连线上的数字表示两地之间的距离。选择一条铺设管道的路线， 使总长度最短。 将整个路程分为A、B、C、D四个阶段，是一个以空间位置为特征的多阶段决 策问题。 B2 B1 B3 A C1 C2 C3 D2 D1 E 3 5 7 7 6 9 5 2 3 8 3 4 6 5 3 9 4 3 5.1 多阶段决策问题 例3：机器负荷分配问题。某种机器可以在高低两种不同的负荷下生产。 在高负荷下生产时，产品的年产量 g 和投入生产的机器数量 u1 的关系为： g = g( u1 ) 此时，机器的年完好率为 a ，即如果年初完好机器的数量为 u ，到年终时完好 的机器为 au ，0 a 1。 在低负荷下生产时，产品的年产量 h 和投入生产的机器数量 u2 的关系为： h = h( u2 ) 相应的机器年完好率为 b ，0 b 1。 设开始生产时完好机器的数量为 s ，制定一个五年计划，在每年开始时，决定 如何分配完好机器在不同负荷下生产的数量，使五年内产品的总产量达到最高。 将每年分配的情况看作一个阶段，共有5个阶段，是一个以时间为特征的多阶 段决策问题。 5.1 多阶段决策问题 在多阶段决策问题中，各个阶段采取的决策与时间有关，随着时间的发展而决 定各时段的决策，产生一个决策序列，这就具有了“动态”的含义，所以把处理这类以时间为划分阶段的动态问题的方法称为动态规划方法。 在实际中也有许多不包含时间因素的一类“静态”决策问题，其本质是一次决策 问题，是非动态决策问题，但是也可人为地引入阶段的概念当作多阶段决策问 题，应用动态规划方法加以解决。 5.2 动态规划的基本概念 阶段（stage）：把一个复杂决策问题按时间或空间特征分解为若干个相互联系 的阶段，以便能按一定的次序求解。 描述阶段的变量称为阶段变量，用下标 k 表示。 状态（state）：每个阶段有若干状态， 表示某一阶段决策面临的条件或所处位 置及运动特征的量。 描述状态的变量称为状态变量， k 阶段的状态特征用状态变量 sk 或xk描述 状态有起始、中间、最终状态之分，每一阶段的全部状态构成该阶段的状态集 合Sk或Xk，并有sk?Sk或xk?Xk 。 每个阶段的状态分为初始状态和终止状态，或称输入状态和输出状态，阶段的 初始状态记作xk ，终止状态记为x