动态规划初步315573063.pptVIP

动态规划初步 江苏省华罗庚中学　杨志军 2006.7　常州 动态规划初步 一、引入 【例题1】 设有一个三角形的数塔，顶点为根结点，每个结点有一个整数值。从顶点出发，可以向左走或向右走，如图所示： 若要求从根结点开始， 请找出一条路径，使 路径之和最大，只要 　输出路径的和。 动态规划初步 动态规划初步 【问题分析】 ① 贪心法往往得不到最优解： 贪心法问题所在：眼光短浅。 根据贪心法，则13－11－21和45，而实质上13－8－40和61。 动态规划初步 ② 若用穷举法：从根结点开始，将所有可能的路径求和，找出最大值，但算法时间复杂性使问题解成为不可能。 当 N＝1　P＝1 N＝2　P＝2 N＝3　P＝4 …… N＝K　P＝2K-1。当N＝50，P＝249＝500万亿条路径。 动态规划初步 数据结构 a:array[1..n,1..n] of integer; 动态规划初步 b[1,1]=a[1,1] (i=1) b[i,1]=b[i-1,1]+a[i,1] b[i,i]=b[i-1,i-1]+a[i,i] (i1) b[i,j]=max{b[i-1,j-1],b[i-1,j]}+a[i,j] 动态规划初步 program ex; const n=5; var i,j,max:integer; a,b:array[1..n,1..n] of integer; begin for i:=1 to n do for j:=1 to i do read(a[i,j]); 动态规划初步 b[1,1]:=a[1,1]; for i:=2 to n do begin b[i,1]:=b[i-1,1]+a[i,1]; b[i,i]:=b[i-1,i-1]+a[i,i]; for j:=2 to i-1 do if b[i-1,j-1]b[i-1,j] then b[i,j]:=b[i-1,j-1]+a[i,j] else b[i,j]:=b[i-1,j]+a[i,j]; end; 动态规划初步 max:=b[n,1]; for j:=2 to n do if maxb[n,j] then max:=b[n,j]; writeln(max=,max); end. 动态规划初步 二、动态规划的几个基本概念 1、阶段和阶段变量 用动态规划求解一个问题时，需要将问题的全过程恰当地划分成若干个相互联系的阶段，以便按一定的次序去求解。描述阶段的变量称为阶段变量，通常用K表示。 阶段的划分一般是根据时间和空间的自然特征来定的，一般要便于把问题转化成多阶段决策的过程。 动态规划初步 2、状态和状态变量 某一阶段的出发位置称为状态，通常一个阶段包含若干状态。状态通过一个变量来描述，这个变量称为状态变量。状态表示的是事物的性质。 动态规划初步 3、决策、决策变量 对问题的处理中做出某种选择性的行动就是决策。一个实际问题可能要有多次决策和多个决策点，在每一个阶段中都需要有一次决策。决策也可以用一个变量来描述，称为决策变量。在实际问题中，决策变量的取值往往限制在某一个范围之内，此范围称为允许决策集合。 动态规划初步 4、策略和最优策略 所有阶段依次排列构成问题的全过程。全过程中各阶段决策变量所组成的有序总体称为策略。在实际问题中，从决策允许集合中找出最优效果的策略称为最优策略。 动态规划初步 5、状态转移方程 前一阶段的终点就是后一阶段的起点，前一阶段的决策变量就是后一阶段的状态变量，这种关系描述了由K阶段到K+1阶段状态的演变规律，是关于两个相邻阶段状态的方程，称为状态转移方程，是动态规划的核心。 动态规划初步 6、指标函数和最优化概念 用来衡量多阶段决策过程优劣的一种数量指标，称为指标函数。它应该在全过程和所有子过程中有定义、并且可度量。指标函数的最优值，称为最优值函数。 最优化概念是在一定条件下，找到一种途径，在对各阶段的效益经过按问题具体性质所确定的运算后，使得全过程的总效益达到最优。 动态规划初步 总之，动态规划所处理的问题是一个“多阶段决策问题”，目的是得到一个最优解（方案）。大概思想如下图所示： 动态规划初步 三、运用动态规划的条件 1、最优化原理 作为整个过程的最优策略具有：无论过去的状态和决策如何，对前面的决策所形成的状态而言，余下的诸决策必须构成最优策略的性