拟牛顿法.pptVIP

  1. 1、本文档共44页,可阅读全部内容。
  2. 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
  3. 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  4. 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
  5. 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
  6. 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们
  7. 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
  8. 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
拟牛顿法

§4.6 拟牛顿法 牛顿法收敛很快,但需要计算Hesse矩阵,而此矩阵可能非正定,可能导致搜索方向不是下降方向。 基本思想: 用不包含二阶导数的矩阵近似Hesse矩阵的逆。 拟牛顿条件 秩1校正 注释 在一定条件下,收敛且具有二次终止性。 无法保证Hk的正定性;即使能,也有可能导致△Hk无界。 DFP算法 BFGS公式 Broyden族 特 点 不必计算Hesse矩阵。 当Hk0时,算法产生的方向均为下降方向,具有二次终止性。 存储量较大。 作 业P218 26 §5 约束优化 数学模型 一阶最优性条件(必要; 充分) 不等式约束问题 一般约束问题 二阶最优性条件(必要; 充分) 起作用约束 下降方向: 可行方向: 可行下降方向 作 业P319 2.(1),(3) 3. 一般约束问题的一阶最优性条件 互补松弛条件 对于凸规划,有下面的一阶充分条件: 凹函数 线性函数 凸函数 * 秩1校正 DFP(Davidon-Fletcher-Powell)算法: 秩2校正 BFGS(Broyden-Fletcher-Goldfarb-Shanno)公式及Broyden族 校正矩阵 秩为1 秩为2 计算步骤: 否 是 否 是 重置 DFP法具有二次终止性! 搜索方向为下降方向 共轭 DFP法具有二次终止性! BFGS修正公式 DFP公式 Sherman-Morrison公式 经验表明,比DFP公式好。 Broyden族的所有成员均满足拟牛顿条件。 拟牛顿法是无约束最优化方法中最有效的一类算法。 R P P P P 局部概念 定理 局部概念 定理 反证法 不等式约束问题的一阶最优性条件 可微 互补松弛条件 对于凸规划,有下面的一阶充分条件: *

文档评论(0)

panguoxiang + 关注
实名认证
文档贡献者

该用户很懒,什么也没介绍

1亿VIP精品文档

相关文档