[企业管理]第4章 动态规划法.pptVIP

第4章 动态规划法 学习要点: 理解动态规划法的思想 掌握动态规划算法的基本要素 掌握设计动态规划算法的步骤 通过应用范例学习动态规划算法设计策略 4.1 概述 动态规划是运筹学的一个分支，它是解决多阶段决策过程最优化问题的一种方法。1951年，美国数学家贝尔曼（R.Bellman）提出了解决这类问题的“最优化原则”，1957年发表了他的名著《动态规划》，该书是动态规划方面的第一本著作。 多阶段决策问题： 可以分为若干个相互联系的阶段，每个阶段都要做出一个决策，这个决策即决定了本阶段的效益，也决定了下一阶段的初始状态。 当每一个阶段的决策确定后，就得到一个决策序列，称为策略。 4.1.1 算法总体思想 与分治法类似，动态规划算法的基本思想也是将待求解问题分解成若干个子问题，但是经分解得到的子问题往往不是互相独立的。 保存已解决的子问题的答案，需要时再找出已求得的答案，就可以避免大量重复计算，从而得到多项式时间算法。 4.1.2 最优化问题 例4-1：付款问题，超市的自动柜员机（POS机）要找给顾客数量最少的现金。如，要找4元6角现金，如何使找出的货币数量最少？ 假定POS机中有n张面值为pi(1≤i≤n)的货币，用集合P={p1, p2, …, pn}表示，如果POS机需支付的现金为A，那么，它必须从P中选取一个最小子集S，使得 （式6.1） 如果用向量X=( x1, x2, …, xn)表示S中所选取的货币，则 （式6.2） 那么，POS机支付的现金必须满足 （式6.3） 并且 （式6.4） 某问题的解是满足约束条件的可行解，并且使得目标函数取得极值，这问题就称为最优化问题。 4.1.3 最优性原理 最优化问题的求解过程可以划分为若干个阶段，每一阶段的决策仅依赖于前一阶段的状态，由决策所采取的动作使状态发生转移，成为下一阶段决策的依据。 ?决策序列：{p1,p2,…,pn-1,pn} 最优性原理： 一个过程的最优策略具有这样的性质，即无论其初始状态及其初始决策如何，其以后诸决策对以第一个决策所形成的状态作为初始状态而言，必须构成最优策略。 直观理解： 如果I-II是A到C的最佳线路，则II一定是B到C的最佳线路。即，“问题”的最优解由“子问题”的最优解组成。 4.1.4 动态规划的设计思想 例4-2：数塔问题。 有形如图4.3所示的一个数塔，从顶部出发，在每一结点可以选择向左走或是向右走，一直走到底层，要求找出一条路径，使路径上的数值和最大。 设计过程如下： 阶段划分： 第一步对于第五层的数据，我们做 如下四次决策： 以上的决策结果将五阶数塔问题变为4阶子问题，递推出第四层与第五层的和为： 21(2+19),28(18+10),19(9+10),21(5+16) 用同样的方法可以将4阶数塔问题，变为3阶数塔问题……最后得到的1阶数塔问题，就是整个问题的最优解。 存储、求解： 原始信息存储： 原始信息有层数和数塔中的数据，层数用一个整型变量n存储，数塔中的数据用二维数组data，存储成如下的下三角阵： 9 12 15 10 6 8 2 18 9 5 19 7 10 4 16 动态规划过程存储： 必需用二维数组d存储各阶段的决策结果。二维数组d的存储内容如下： d[n][j]=data[