机器学习数据回归摘要.pptVIP

* * * * * * * * * * * * * * * * * * * * * 中国科学院大学 叶齐祥 qxye@ucas.ac.cn 第2.1节 数据回归Data regression 主要内容: 线性回归 线性回归 局部加权的线性回归 非线性回归 带有非线性基的回归 欠拟合与过拟合 Logistic 回归 数据回归介绍 例子 假如你刚刚搬到学校，需要知道在你学校周围的房价，设计一个数据回归程序。 距离学校的距离 卧室数目 房租 2.30km 1 1600 5.06km 2 2000 4.33km 2 2100 1.09km 1 1500 … 1.50km 1 ? 2.70km 1.5 ? 例子 假如你刚刚搬到学校，需要知道在你学校周围的房价，设计一个数据回归程序。 距离 房 租 1.0/距离 房间 房 租 数据回归介绍 问题描述 特征： 居住面积、房间数、距离… 训练集合 回归目标 数据回归介绍 Training set Learning algorithm X h y 房价 假设目标(Y)是特征的线性方程 如何求取参数 直观的方法是最小化 线性回归 目标方程 梯度方法求解 获得梯度下降迭代 线性回归—最小均方差（LMS）求解 目标方程 Steepest下降方法求解 获得Steepest decent迭代