[理学]第八章动态规划.ppt

动态规划 什么是动态规划 解决多阶段决策过程最优化的一种数学方法。 动态规划的形成 产生于20世纪50年代。1951年美国数学家贝尔曼(R.Bellman)等人，根据一类多阶段决策问题的特点，把多阶段决策问题变换为一系列互相联系的单阶段问题，然后逐个加以解决。与此同时，他提出了解决这类问题的“最优性原理”，研究了许多实际问题，从而创建了解决最优化问题的一种新的方法——动态规划。 动态规划的应用 在工程技术、企业管理、工农业生产及军事等部门中都有广泛的应用，并且获得了显著的效果。 动态规划 动态规划在企业管理中的主要应用领域 最优路径问题 资源分配问题 生产调度问题 库存问题 装载问题 排序问题 设备更新问题 生产过程最优控制问题 等等 动态规划是求解某类问题的一种方法，是考查问题的一种途径，而不是一种特殊算法(如线性规划是一种算法)。因而，它不像线性规划那样有一个标准的数学表达式和明确定义的一组规则，而必须对具体问题进行具体分析处理。 动态规划 动态规划模型的分类 根据多阶段决策过程的时间参量是离散的还是连续变量，分为离散决策过程和连续决策过程。 根据决策过程的演变是确定性的还是随机性的，又可分为确定性决策过程和随机性决策过程。 组合起来可分为 离散确定性 离散随机性 连续确定性 连续随机性 本书主要研究离散决策过程。 第1节 多阶段决策过程及实例 多阶段决策过程 在生产和科学实验中，有一类活动的过程，由于它的特殊性，可将过程分为若干个互相联系的阶段，在它的每一个阶段都需要作出决策，从而使整个过程达到最好的活动效果。因此，各个阶段决策的选取不是任意确定的，它依赖于当前面临的状态，又影响以后的发展。当各个阶段决策确定后，就组成了一个决策序列，因而也就决定了整个过程的一条活动路线。这种把一个问题可看作是一个前后关联具有链状结构的多阶段过程就称为多阶段决策过程，也称序贯决策过程。 第1节 多阶段决策过程及实例 例1 最短路线问题 给定一个线路网络，两点之间连线上的数字表示两点间的距离(或费用)，试求一条由A到G的铺管线路，使总距离为最短(或总费用最小)。 第1节 多阶段决策过程及实例 第2节 动态规划的基本概念和基本方程 2.1 动态规划的基本概念 1．阶段 把所给问题的过程，恰当地分为若干个相互联系的阶段，以便能按一定的次序去求解。描述阶段的变量称为阶段变量，常用k表示。阶段的划分，一般是根据时间和空间的自然特征来划分，但要便于把问题的过程能转化为多阶段决策的过程。如例1可分为6个阶段来求解，k分别等于1、2、3、4、5、6。 2.1 动态规划的基本概念 2．状态 状态表示每个阶段开始所处的自然状况或客观条件，它描述了研究问题过程的状况，又称不可控因素。在例1中，状态就是某阶段的出发位置。它既是该阶段某支路的起点，又是前一阶段某支路的终点。通常一个阶段有若干个状态，第一阶段有一个状态就是点A，第二阶段有两个状态，即点集合｛B1，B2｝，一般第k阶段的状态就是第k阶段所有始点的集合。 2.1 动态规划的基本概念 2.1 动态规划的基本概念 2.1 动态规划的基本概念 3．决策 如在例1第二阶段中，若从状态B1出发，就可作出三种不同的决策，其允许决策集合D2(B1)＝｛C1，C2，C3｝，若选取的点为C2，则C2是状态B1在决策u2(B1)作用下的一个新的状态，记作u2(B1)=C2。 2.1 动态规划的基本概念 2.1 动态规划的基本概念 2.1 动态规划的基本概念 2.1 动态规划的基本概念 2.1 动态规划的基本概念 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 2.2 动态规划的基本思想和基本方程 第3节 动态规划的最优性原理和最优性定理 第3节 动态规划的最优性原理和最优性定理 资源分配问题 资源分配问题 资源分配问题 资源分配问题 资源分配问题 资源分配问题 资源分配问题 资源分配问题 资源分配问题 资源分配问题 资源分配问题 资源分配问题 资源分配问题 资