第3节离散确定性动态规划模型的求解讲述.ppt

安徽科技学院 最优化技术 第三节离散确定性动态规划模型的求解 例1：某一警卫部门共有9支巡逻队，负责三个要害部位A,B,C的警卫巡逻，对每个部位可派出2~4支巡逻队，并且由于派出巡逻队数的不同，各部位预期在一段时间内可能造成的损失有差别，具体数字如下表，问警卫部门应往各部位分别派多少支巡逻队，使总的预期损失最小。 预期损失 部位 巡逻队数 A B C 2 3 4 18 14 10 38 35 31 24 22 21 解：逆序解法：将向三个部位A,B,C派巡逻队作为三个阶段，K=1,2,3 决策变量xk表示向第K个部位派遣的巡逻队数。 状态变量sk表示第K个阶段时可供派遣的巡逻队数。 状态转移方程：sk+1=sk-xk 阶段指标函数：pk(xk)表示派xk支巡逻队时第K阶段的预期损失 过程指标函数： 第K阶段到第3阶段的预期损失。 最优指标函数： 当K=3时，给C派巡逻队 　　 　　　　　　　　 2　　　3　 　4　 2 24 - 24 2 3 24 22 - 22 3 4 24 22 21 21 4 5 24 22 21 21 4 边界条件 最优指标函数 递推 关系式 当K=2时，给B 派巡逻队 　　 　　　　　　　　 2　　　3　　　 4　 5 38+22 35+24 - 59 3 6 38+21 35+22 31+24 55 4 7 38+21 35+21 31+22 53 4 当K=1时，给A派巡逻队 　　 　　　　　　　　 2　 　3　　 4 9 18+53 14+55 10+59 69 3，4 最优方案：A 派3支巡逻队,B派4支巡逻队,C派2支巡逻队； 或：A 派4支巡逻队,B派3支巡逻队,C派2支巡逻队 . 将向三个部位A,B,C派巡逻队作为三个阶段，K=1,2,3 决策变量xk表示向第K个部位派遣的巡逻队数。 状态变量sk表示前K-1个阶段可派遣的巡逻队数量。 状态转移方程：sk=sk+1-xk 或 sk=sk+1-xk 阶段指标函数：pk(sk)派xk支巡逻队时第K阶段的预期损失 最优指标函数：前K个阶段的最优目标 顺序解法： 边界条件： 递推 关系式 当K=1时，给A派巡逻队 　　 　　　　　　　　 2　　　3　　　4　 2 18 18 2 3 18 14 14 3 4 18 14 10 10 4 5 18 14 10 10 4 当K=2时，给B派巡逻队 　　 　　　　　　　　 2　　　3　　　 4　 5 38+14 35+18 52 2 6 38+10 35+14 31+18 48 2 7 38+10 35+10 31+14 53 3，4 当K=3时，给C派巡逻队 　　 　　　　　　　　 2　　　3　　　 4　 9 24+45 22+48 21+52 69 2 最优方案：A 派3支巡逻队,B派4支巡逻队,C派2支巡逻队； 或：A 派4支巡逻队,B派3支巡逻队,C派2支巡逻队 . 例2：设有某种设备，用于完成两类工作A和B。若k年初完好机器数量为sk，若以数量xk用于A，余下的(sk-xk)用于工作B，则该年的预测收入为g(xk)+h(sk-xk).这里g(xk)和h(sk-xk)是已知函数，且g(0)=h(0)=0.又机器设备在使用中会损坏，设备用于工作A时，一年后能继续使用的完好机器数占年初投入量的a%；若用于工作B，则完好率为b%，即下一年初能继续使用的设备数为 sk+1=axk+b(sk-xk).设第一年年初完好的机器总数为s1，问在连续三年内每年应如何分配用于A、B两项工作的机器数，使三年的总收益最大。 边界条件： 如果： 解：将三年作为三个阶段(k=1,2,3)，状态变量sk为k年初可用于工作的完好机器数，xk为第k年用于完成A项任务的机器数，(sk-xk)为用于完成任务B的机器数，因而有 递推方程： 采用逆序解法 当K=3时，第三年初分配机器x3台生产A，s3-x3台生产B ， 当K=2时，第二年初分配机器x2台生产