第二部分动态规划课程.pptVIP

第二章 动态规划 一般状态变量的取值有一定的范围或允许集合，称为可能状态集（set of admissible states） 。可能状态集实际上是关于状态的约束条件。通常可能状态集用相应阶段状态sk的大写字母Sk表示，可能状态集可以是一离散取值的集合，也可以为一连续的取值区间，视具体问题而定．例如上面的最短路问题中，第一阶段状态为A，状态变量s1的状态集合S1={A}；第二阶段则有三个状态：B1 ,B2 ,B3 ,状态变量s2的状态集合S2={B1 ,B2 ,B3 } . 指标函数Vk,n（sk， pk,n ）通常是描述所实现的全过程或k后部子过程效果优劣的数量指标，它是由各阶段的阶段指标函数dk（sk，uk）累积形成的，适于用动态规划求解的问题的指标函数，必须具有关于阶段指标的可分离形式．对于后部子过程的指标函数可以表示为： 总之，具体问题的目标函数表达形式需要视具体问题而定。 即 多阶段决策问题的数学模型 综上所述，适于应用动态规划方法求解的一类多阶段决策问题，亦即具有无后效性的多阶段决策问题的数学模型呈以下形式: 最优化原理 （贝尔曼最优化原理） 作为一个全过程的最优策略具有这样的性质：对于最优策略过程中的任意状态而言，无论其过去的状态和决策如何，余下的诸决