5、动态规划.pptVIP

动态规划应用举例——工程路线问题 某旅行者希望从s地起到t地，其间的道路系统如图4－1所示，图上圆圈表示途径的地方，称为节点，连结两地的箭线表示道路，其上的数字表示该段道路长度，箭头表示通行的方向。试求s到t的最短路 a d b e t c f s 9 7 5 7 8 4 5 6 4 6 5 4 7 a d b e t c f s 9 7 5 7 8 4 5 6 4 6 5 4 7 第一阶段 第二阶段 第三阶段 划分阶段 k=1,2,3 代表三个阶段 动态规划应用举例——工程路线问题 a d b e t c f s 9 7 5 7 8 4 5 6 4 6 5 4 7 状态变量xk取为k阶段所在地，则有： 动态规划应用举例——工程路线问题 k阶段决策是决定下一步走到哪里，uk(xk)取为下一步的所在点 a d b e t c f s 9 7 5 7 8 4 5 6 4 6 5 4 7 动态规划应用举例——工程路线问题 第3阶段末已到达t，因此f4(t)=0 对3阶段所有可能的状态X3={d, e, f}计算f3( )如下 动态规划应用举例——工程路线问题 1 逆序地求出条件最优目标函数值集合和条件最优决策集合 对2阶段所有可能的状态X2={a, b, c}计算f2( )如下 动态规划应用举例——工程路线问题 1 逆序地求出条件最优目标函数值集合和条件最优决策集合 对2阶段所有可能的状态X2={a, b, c}计算f2( )如下 动态规划应用举例——工程路线问题 1 逆序地求出条件最优目标函数值集合和条件最优决策集合 对1阶段所有可能的状态X1={s}计算f1( )如下 动态规划应用举例——工程路线问题 1 逆序地求出条件最优目标函数值集合和条件最优决策集合 动态规划应用举例——工程路线问题 顺序地求出最优目标值、最优策略和最优路线 2 动态规划应用举例——资源分配问题 某公司拟将50万元资金投放下属A、B、C三个部门，各部门在获得资金后的收益如下表所示，用动态规划方法求总收益最大的投资分配方案（投资数以10万元为单位） 投资资金（万元） 0 10 20 30 40 50 收益 （万元） A 0 15 20 25 28 30 B 0 0 10 25 45 70 C 0 10 20 30 40 50 动态规划应用举例——资源分配问题 对A、B、C三个部门分配资金形成三个阶段 xk表示给部门k分配资金时拥有的资金数 uk表示给部门k分配的资金数 状态转移方程是 目标函数是 第3阶段末资源分配完毕，因此f4(x4)=0 K=3时 动态规划应用举例——资源分配问题 1 逆序地求出条件最优目标函数值集合和条件最优决策集合 g3()是单调递增的函数 K=3时 动态规划应用举例——资源分配问题 1 逆序地求出条件最优目标函数值集合和条件最优决策集合 K=2时 对x2的所有取值，有 动态规划应用举例——资源分配问题 1 逆序地求出条件最优目标函数值集合和条件最优决策集合 K=2时 动态规划应用举例——资源分配问题 1 逆序地求出条件最优目标函数值集合和条件最优决策集合 同理可得 K=1时 动态规划应用举例——资源分配问题 1 逆序地求出条件最优目标函数值集合和条件最优决策集合 最优的分配方案所能得到的最大利润为70万元 分配方案可由计算过程反向查出为： 即为部门B分配50万元，部门A和C不分配 动态规划应用举例——资源分配问题 本科教学工作水平评估 * 本科教学工作水平评估 * 本科教学工作水平评估 * XI’AN JIAOTONG UNIVERSITY XI’AN JIAOTONG UNIVERSITY 西安 交通大学 郭菊娥 XI’AN JIAOTONG UNIVERSITY XI’AN JIAOTONG UNIVERSITY XI’AN JIAOTONG UNIVERSITY 动态规划 郭菊娥教授 guojue@mail.xjtu.edu.cn 西安交通大学 * 第五章：动态规划 动态规划求解 2 动态规划应用举例 3 3 动态规划概念与模型 3 1 动态规划概念与模型 引言 多阶段决策过程 动态规划概念与模型 动态规划模型 动态规划建模 动态规划概念与模型——引言 决策 x1 x2 Z u 输入 决策 输出 决策效应 第一月 x1 x2 r1 u1 第二月 x3 r2 u2 第三月 x4 r3 u3 静态决策 一次性决策 动态决策 多阶段决策 多阶段决策过程 T1 x1 x2 r1 u1 T2 x3 r2 u2 Tk xk xk+1 rk uk Tn xn xn+1 rn un … … n个决策子问题；K称为阶