动态规划-解法(一)解读.ppt

连续变量的解析解法 动态规划GXB制作 s1=100 k=1 k=2 k=3 连续变量的解析解法 动态规划GXB制作 s1=100 k=1 k=2 k=3 基本方程分段求解时的几种常用算法 离散变量的分段穷举算法 连续变量的解析解法 连续变量的离散化解法 高维问题的降维法及疏密格子点法 结合具体问题—资源分配问题 ? 动态规划GXB制作 动态规划GXB制作 动态规划（Dynamic Programming) 多阶段的决策问题 最优化原理与动态规划的数学模型 离散确定性动态规划模型的求解 离散随机性动态规划模型的求解 一般数学规划模型的动态规划的解法 ? 2015/12/20 动态规划GXB制作 动态规划的解法 建立基本方程的方法： 逆序解法（后向动态规划方法） 顺序解法（前向动态规划方法） 动态规划GXB制作 基本方程分段求解时的几种常用算法 离散变量的分段穷举算法 连续变量的解析解法 连续变量的离散化解法 高维问题的降维法及疏密格子点法 无固定解法，结合具体问题，技巧灵活 资源分配问题 ? 动态规划GXB制作 资源分配问题 例4 某一警卫部门共有9支巡逻队,负责3个要害部位A、B、C的警卫巡逻.对每个部位可分别派出2~4支巡逻队,并且由于派出巡逻队数的不同,各部位预期在一段时期内可能造成的损失有差别,具体数字见下表.问该警卫部门应往各部位分别派多少支巡逻队,使总的预期损失为最小. 预期损失 部位 A B C 巡 逻 队 数 2 18 38 24 3 14 35 22 4 10 31 21 (1)逆序解法 状态变量sk：第k阶段初可派遣的巡逻队数. k=1,2,3 决策变量xk：第k阶段派出的巡逻队数. Dk(sk)={xk|2≤xk≤4} 状态转移率：sk+1=sk-xk 阶段指标函数pk(xk)：表示k阶段派出巡逻队数为xk时,该阶段的部位的预期损失值 指标函数： 基本方程： 逆序算法 s1 A3 A2 B4 B3 B2 C4 C2 C3 s4 (59,5) (24,2) (21,4) x1=3, x2=4, x3=2 A4 (22,3) (55,6) 弧旁的数字为(Vk,3 , sk) (60,5) (57,6) (53,7) (59,6) (56,7) (73,9) (70,9) (69,9) (74,9) (73,9) (71,9) (69,9) x1=4, x2=3, x3=2 (2)顺序解法 状态变量sk：第k阶段初可派遣的巡逻队数. k=1,2,3 决策变量xk：第k阶段派出的巡逻队数. Dk(sk)={xk|2≤xk≤4} 状态转移率：sk=sk+1-xk 阶段指标函数pk(xk)：表示k阶段派出巡逻队数为xk时,该阶段的部位的预期损失值 指标函数： 基本方程： 顺序算法 s1 A3 A2 B4 B3 B2 C4 C2 C3 s4 (45,7) (69,9) (73,9) x1=3, x2=4, x3=2 A4 (70,9) (49,6) 弧旁的数字为(V1,k , sk) (52,5) (49,6) (45,7) (48,6) (53,5) (18,2) (10,4) (10,4) (18,2) (14,3) (14,3) (14,3) x1=4, x2=3, x3=2 基本方程分段求解时的几种常用算法 离散变量的分段穷举算法 连续变量的解析解法 连续变量的离散化解法 高维问题的降维法及疏密格子点法 无固定解法，结合具体问题，技巧灵活 资源分配问题 ? 动态规划GXB制作 资源分配问题 某公司有资金10万元，若投资于项目i（i = 1，2，3）的投资额为 时，其收益分别为 问题：如何分配投资数额才能使总收益最大？ 连续变量的解析解法 连续变量的离散化解法 动态规划GXB制作 动态规划模型的建立 阶段k：按项目为3个阶段，k=1，2，3。 状态变量 ：可用于投资第k阶段的资金。 决策变量 ：决定给第k阶段（项目）的资金。 状态转移方程： 指标函数： 动态规划GXB制作 连续变量的解析解法 状态 ：第k阶段初可以分配给第k到第3个项目的资金额。 逆序解法 动态规划GXB制作 状态转移方程： 指标函数： 就是最大收益。 基本方程： 动态规划GXB制作 连续变量的解析解法 动态规划GXB制作 由下一步确定 连续变量的解析解法 状态转移 解析求解 连续变量的解析解法 最大收益 动态规划GXB制作 连续变量的解析解法 最大收益200万元 顺推求出最优方案即决策变量的值 动态规划GXB制作 连续变量的解析解法 状态 ：可