运筹学74动态规划应用举例讲解.ppt

设 是已知的n个城镇，城镇 到城镇 的距离为 ，现求从 出发，经各城镇一次且仅一次返回 的最短路程。若对n个城镇进行排列，有 (n一1)!／2种方案，所以穷举法是不现实的，这里介绍一种动态规划方法。 货郎担问题也是求最短路径问题，但与例4的最短路问题有很大不同，建动态规划模型时，虽然也可按城镇数目n将问题分为n个阶段。但是状态变量不好选择，不容易满足无后效性。为保持状态间相互独立，可按以下方法建模： 设S表示从 到 中间所有可能经过的城市集合，S实际上是包含除 与 两个点之外其余点的集合，但S中的点的个数要随阶段数改变。 状态变量 表示：从 点出发．经过S集合中所有点一次最后到达 。 最优指标函数 为从 出发经由k个城镇的S集合到Vi的最短距离。 决策变量 表示：从 经k个中间城镇的S集合到 城镇的最短路线上邻接 的前一个城镇，则动态规划的顺序递推关系为： 例6 已知4个城市间距离如表7—16，求从v1出发，经其余城市一次且仅一次最后返回v1的最短路径与距离。 解 由边界条件（7.21b）知： 当k=1时，从城市v1出发，经过1个城镇到达vi的最短距离为： 当k=2时，从城市v1出发，经过2个城镇到达vi的最短距离为： 当k=3时，从城市v1出发，经过3个城镇到达vi的最短距离为： 逆推回去，货郎的最短路线是l→2→4→3→1最短距离为23。 货郎担问题当城市数目增加时，用动态规划方法求解，无论是计算量还是存贮量都会大大增加，所以本方法只适合于n较小情况。 阶段k：可按采购期限(周)分为5段，k＝1，2，3，4，5。 状态变量 ：第k周的原料实际价格。 决策变量 ：第k周如采购 则 ＝1，若不采购 则 =0。 另外用 表示：当第k周决定等待，而在以后采购时的采购价格期望值。 最优指标函数 ：第k周实际价格为 时，从第k周至第5周采取最优策略所花费的最低期望价格。 则有逆序递推关系式为： 解 本例与前面所讨论的确定型问题不同，状态的转移不能完全确定，而按某种已知的概率分布取值，即属于随机型动态规划问题。 为状态集合{500，600，700}。 当k=5时 因为若前四周尚未购买，则无论本周价格如何，该部门都必须购买，所以 当k=4时 由于 所以 当k=3时 由于 所以 当k=2时 同理 当k=1时 所以，最优采购策略为：若第一、二、三周原料价格为500，则立即采购，否则在以后的几周内再采购。若第四周价格为500或600，则立即采购，否则等第五周再采购。而第五周时无论当时价格为多少都必须采购。 按照以上策略进行采购，期望价格为： 三、设备更新问题 从经济上分析，一台设备应该 使用多少年更新最合算，这就是设备更新问题。一般来说，一台设备在比较新时，年运转量大，经济收入高，故障少，维修费用少，但随着使用年限的增加，年运转量减少因而收入减少，故障变多,维修费用增加。如果更新可提高年净收入，但是当年要支出一笔数额较大的购买费，为了比较不同决策的优劣，常常要在一个较长的时间内考虑更新决策问题。 设备更新问题一般提法：在已知一台设备的效益函数r(t)，维修费用函数u(t)及更新费用函数c(t)条件下，要求在n年内的每年年初作出决策，是继续使用旧设备还是更换一台新的，使n年总效益最大。 rk(t)：在第k年设备已使用过t年(或称役龄为t年)，再使用1年时的效益。 uk(t) ：在第k年设备役龄为t年，再使用一年的维修费用。 ck(t) ：在第k年卖掉—台役龄为t年的设备，买进一台新设备的更新净费用。 ?为折扣因子(0???1) ，表示一年以后的单位收入价值相当于现年的?单位。 动态规划模型 阶段变量k：k=1,2,…,n，表示计划使用该设备的年限数。 状态变量sk: 第k年初，设备已使用过的年数，即役龄。 决策变量xk: 是第k年初更新（Replacement），还是保留使用（keep）旧设备，分别用R与K表示。 状态转移方程为： 阶段指标为： 指标函数为： 最优指标函数fk(sk)表示第k年初，使用一台已用了sk年的设备，到第n年末的最大收益，则可得如下的逆序动态规划方程： 实际上， 例5 设某台新设备的年效益及年均维修费、更新净费用如表7-15所示。试确定今后5年内的