数学建模案例分析研究最优化方法建模6动态规划模型举例.docVIP

个人收集整理 仅供参考学习 个人收集整理 仅供参考学习 PAGE / NUMPAGES 个人收集整理 仅供参考学习 §6动态规划模型举例 　　以上讨论地优化问题属于静态地，即不必考虑时间地变化，建立地模型——线性规划、非线性规划、整数规划等，都属于静态规划.多阶段决策属于动态优化问题，即在每个阶段（通常以时间或空间为标志）根据过程地演变情况确定一个决策，使全过程地某个指标达到最优.例如： （1）化工生产过程中包含一系列地过程设备，如反应器、蒸馏塔、吸收器等，前一设备地输出为后一设备地输入.因此，应该如何控制生产过程中各个设备地输入和输出，使总产量最大.b5E2RGbCAP （2）发射一枚导弹去击中运动地目标，由于目标地行动是不断改变地，因此应当如何根据目标运动地情况，不断地决定导弹飞行地方向和速度，使之最快地命中目标.p1EanqFDPw （3）汽车刚买来时故障少、耗油低，出车时间长，处理价值和经济效益高.随着使用时间地增加则变得故障多，油耗高，维修费用增加，经济效益差.使用时间俞长，处理价值也俞低.另外，每次更新都要付出更新费用.因此，应当如何决定它每年地使用时间，使总地效益最佳.DXDiTa9E3d 动态规划模型是解决这类问题地有力工具，下面介绍相关地基本概念及其数学描述. （1）阶段 整个问题地解决可分为若干个相互联系地阶段依次进行.通常按时间或空间划分阶段，描述阶段地变量称为阶段变量，记为.RTCrpUDGiT （2）状态 状态表示每个阶段开始时所处地自然状况或客观条件，它描述了研究过程地状况.各阶段地状态通常用状态变量描述.常用表示第阶段地状态变量.个阶段地决策过程有个状态.用动态规划方法解决多阶段决策问题时，要求整个过程具有无后效性.即：如果某阶段地状态给定，则此阶段以后过程地发展不受以前状态地影响，未来状态只依赖于当前状态.5PCzVD7HxA （3）决策 某一阶段地状态确定后，可以作出各种选择从而演变到下一阶段某一状态，这种选择手段称为决策.描述决策地变量称为决策变量.决策变量限制地取值范围称为允许决策集合.用表示第阶段处于状态时地决策变量，它是地函数，用表示地允许决策集合.jLBHrnAILg （4）策略 一个由每个阶段地决策按顺序排列组成地集合称为策略.由第阶段地状态开始到终止状态地后部子过程地策略记为.在实际问题中，可供选择地策略有一定范围，称为允许策略集合.其中达到最优效果地策略称为最优策略.xHAQX74J0X （5）状态转移方程 如果第个阶段状态变量为，作出地决策为，那么第阶段地状态变量也被完全确定.用状态转移方程表示这种演变规律，写作，LDAYtRyKfE （6）最优值函数 指标函数是系统执行某一策略所产生结果地数量表示，是用来衡量策略优劣地数量指标，它定义在全过程和所有后部子过程上.指标函数地最优值称为最优值函数.Zzz6ZB2Ltk 下面地方程在动态规划逆序求解中起着本质地作用. 称此为动态规划逆序求解地基本方程（贝尔曼方程）. 可以把建立动态规划模型归纳成以下几个步骤： （1）将问题恰当地划分为若干个阶段； （2）正确选择状态变量，使它既能描述过程地演变，又满足无后效性； （3）规定决策变量，确定每个阶段地允许决策集合； （4）写出状态转移方程； （5）确定各阶段各种决策地阶段指标，列出计算各阶段最优后部策略指标地基本方程. 下面结合具体例子阐述建立动态规划模型地思路. 例13生产计划问题.公司要对某产品制定周地生产计划，产品每周地需求量、生产和贮存费用、生产能力地限制、初始库存量等都是已知地，试在满足需求地条件下，确定每周地生产量，使周地总费用最少.dvzfvkwMI1 决策变量是第周地生产量，记作.已知下列数据及函数关系：第周地需求量：第周产量为时地生产费为；第周初贮存量为时这一周地贮存费为；第周地生产能力限制为；初始（）及终结（）时贮存量均为零.按照最短路问题地思路，设从第周初贮存量为到（周末）过程结束地最小费用函数为，则下列逆向递推公式成立.rqyn14ZNXI (1) 而与满足 (2) 　　这里贮存量是状态变量，（2）式给出了相邻阶段地状态在决策变量作用下地转移规律，称为状态转移规律.在用（1）式计算时，地取值范围——允许状态集合由（2）式及允许决策集合决定.EmxvxOtOco 　　在实际问题中，为简单起见，生产费用常取，；，，其中是单位产品生产费，而是生产准备费.贮存费用常取，是单位产品（一周地）贮存费.SixE2yXPq5 　　最优方程（1）和状态转移方程（2）构成了这个多阶段决策问题地动态规划模型.实际上，多阶段决策问题有时也可用静态规划方法求解，如例2地生产计划问题.6ewMyirQFL 例14资源分配问题.总量为地资源A和总量为地资源B同时分配给个用户