大数据解析与应用导论 课件4-3 岭回归分析课件.pptxVIP

  • 2
  • 0
  • 约1.57千字
  • 约 13页
  • 2023-05-09 发布于辽宁
  • 举报

大数据解析与应用导论 课件4-3 岭回归分析课件.pptx

授课教师: 赵春晖 1大数据解析与应用导论 Introduction to Big Data Analytics and Application 第四章 回归分析 基本概念1. 最小二乘回归2.岭回归3.主元回归4.偏最小二乘5. 4.3 岭回归分析(1)最小二乘回归的局限性??123451.11.41.71.71.81.11.51.81.71.90.8-0.50.4-0.50.2y16.316.819.21819.5?? (2)岭回归分析的定义4.3 岭回归分析岭回归分析(Ridge Regression)是一种专用于多重共线性数据分析的有偏估计回归方法,是最小二乘法的改良版。岭回归分析的参数估计:最小二乘回归的参数估计:对于回归问题:由于加上了单位矩阵I其对角线全一,像一条山岭一样,就叫做岭回归算法。? (3)岭回归分析的数学基础4.3 岭回归分析LSRRR岭回归分析的优化目标函数:对上述函数求偏导令其等于0得到参数估计的结果:岭回归与最小二乘回归对比? (4)岭参数的选择——岭迹图法4.3 岭回归分析岭迹图:β随着λ变化的图像,状如山岭,所以得名为岭迹图。(b)(a)(c)参数不稳定对回归不起作用模型稳定,参数可取。多种多样的岭迹图 (4)岭参数的选择——岭迹图法4.3 岭回归分析稳定的岭迹图岭迹法选择k值的一般原则是:各回归系数的岭估计基本稳定;用最小二乘

您可能关注的文档

文档评论(0)

1亿VIP精品文档

相关文档