运筹学动态规划.pptVIP

* 离散随机性动态规划 用C(xk)表示第k阶段的费用，第k阶段的费用包 括制造成本和装配费用，故有 根据状态转移方程以及C(xk)，可得到 * 离散随机性动态规划 如果3个月后没有试制出一件合格品，则要承担 2000元的罚金，因此有f4(1)=20。 当k=3时，计算如下表： x3 s3 C(x3)+20× f3(s3) x3* 0 1 2 3 4 5 6 0 0 — — — — — — 0 0 1 20 15 11.2 9.32 8.59 8.56 8.93 8.56 5 * 离散随机性动态规划 当k=2时，计算如下表： x2 s2 C(x2)+8.56× f2(s2) x2* 0 1 2 3 4 0 0 — — — — 0 0 1 8.56 8.14 7.08 6.85 7.11 6.85 3 * 离散随机性动态规划 当k=1时，有 x1 s1 C(x1)+6.85× f1(s1) x1* 0 1 2 3 0 0 — — — 0 0 1 6.85 7.11 6.46 6.48 6.46 2 * 离散随机性动态规划 上面三个表中并没有列出xk取更大数值的情况，因为可以证明以后的C(xk)+ fk+1(1)的值是对xk单调增加的。 因此得到的最优策略是，在第1个阶段试制2件产品；如果都不合格，在第2阶段试制3件产品；如果仍都不合格，则在第3个阶段试制5件产品。该策略得到的最小的期望费用6.46。 * 离散随机性动态规划 随机采购问题 例3 某公司打算在5周内采购一批原料，未来5周内的原料的价格有三种，这些价格的出现概率可以估计，如下表。该部分由于生产需要，必须在5周内采购这批原料。如果第一周价格很高，可以等到第2周；同样的，第2周如果仍对价格不满意，可以等到第3周；类似地，未来几周都可能选择购买或者等待，但必须保证第5周时采购了该原料。试问该选择哪种采购方案，才能使得采购费用最小？ 价格 概率 450 0.25 470 0.35 500 0.40 * 离散随机性动态规划 解：建立动态规划。按照采购周期分为5个阶段，将每周的价格看作该阶段的状态。假设状态变量sk表示第k周的实际价格，决策变量xk表示第k周是否采购的0-1变量。如决定采购，则xk=1；如选择等待，则xk=0。用skE表示第k周等待，而在以后采取最优决策时采购价格的期望值。 根据定义， 动态规划基本方程如下： * 离散随机性动态规划 第五阶段： 因为如果前4周都没有买，那第5周必须购买，因 此有f5(s5)=s5，即f5(450)=450；f5(470)=470； f5(500)=500。 第四阶段： 下面考虑第4周的情况。 如第4周购买，则需花费s4；如果不买，则必须 在第5周购买。在第5周采购的费用的期望值为 * 离散随机性动态规划 于是 ，有 故第4周的最优决策为 同理，考虑第3周的最优决策。 * 离散随机性动态规划 第三阶段： 如果第3周采购，则需花费s3；也要和第3周后再 采购的费用的期望值作比较。 于是 ，有 故第3周的最优决策为 * 离散随机性动态规划 第二阶段： 同理可得 故第2周的最优决策为 * 离散随机性动态规划 第一阶段： 同理可得 第1周的最优决策为 * 离散随机性动态规划 由上可知，最优的采购策略为：在第1、2、3周的市场价格为450时，应该立即采购，否则等待；在第4周时，若市场价格为450或470时，应该采购，否则等待。若等到第五周，只能采购。 ? ? * 　 第一阶段： 　 我们已知　　　　，又因为　　 ，同样有 因为　 ,故　可取值为0,1,2, … ,10。其数值