SPSS第六讲线性回归分析.pptVIP

第六讲 线性回归分析 一、线性回归分析的基本原理 二、线性回归分析操作步骤与说明 三、一元线性回归分析 四、多元线性回归分析 五、多元线性回归分析中共线性的含义及其后果 六、判断高度共线性的指标方法 七、高度共线性的解决思路 八、多元线性回归方法 一、线性回归分析的基本原理 （一）相关与回归的关系 （二）回归分析的含义与类型 （三）消减误差比例思想与判定系数 （四）回归分析的逻辑 （一）相关与回归的关系 1、相关与回归的关系 （1）函数关系 （2）统计相关：线性相关；非线性相关 （3）因果关系 相 关 类 型 讨论： 统计上相关与实际相关？ 相关关系 统计相关 因果关系 统计因果关系 相关是回归的基础 （二）回归分析的含义与类型 （1）含义：自变量每改变一个单位，因变量的均值变化情况。 （2）回归模型设定：统计上的“因果”关系，确定了自变量与因变量（假设）。 （3）类型： 根据自变量的多少，可分为一元回归分析、多元回归分析； 根据关系类型，可分为线性回归、非线性回归； 本课程讲解一元线性回归、多元线性回归。 一元线性回归方程求解 Y=aX+b 最小二乘法求a、b 二元线性回归方程 Y=a1X1+a2X2+b （三）“消减误差比例”思想——用“已知”来估计“未知”、减少犯错概率 1、要预测或理解社会现象Y变化的情况难免会有误差。 2、如果知道X与Y有关系，根据X的值来预测Y的值，可以减少若干误差。 3、X与Y的关系愈强，所能减少的预测误差就会愈多。 4、 所削减的误差的多少，可以反映X与Y相关的强弱程度 。 5、消减误差比例：表示用一个现象(如变量X)来解释另一个现象(如变量Y)时能够消减的总误差的比例，即减少的误差与原来的全部误差之比。 消减误差比例表达式： 消减误差比例（PRE的取值及其意义） 1、PRE数值的取值范围是[o，1] 如何判定线性拟合（fitness） 调整的R2系数： 如果增加自变量，不管增加后的自变量是否与因变量有关系，都会使判定系数（R2）增大，如果自变量的数目（K）接近样本的个案数（n）， R2将会必然接近于1.0，解决这一问题的方法是使用“校正的” R2 。 （Wonnacott,R. M. T. H. Wonnacott, 1979） （四）多元线性回归分析的逻辑 一元线性回归方程检验 Total Sum of Squares ＝ Residual Sum of Squares ＝ Regression Sum of Squares R2 ＝ SSR/TSS 二元线性回归方程检验 Total Sum of Squares ＝ Residual Sum of Squares ＝ Regression Sum of Squares R2 ＝ SSR/TSS 三元线性回归方程检验 Total Sum of Squares ＝ Residual Sum of Squares ＝ Regression Sum of Squares R2 ＝ SSR/TSS 二、线性回归分析操作步骤与说明 三、一元线性回归分析 研究问题：个体的受教育水平受到父亲的受教育水平的影响有多大？ 数据：1991 U. S. General Survey.sav 散点图 回归分析操作步骤： 输出结果解释（共四个表格） 2、判定系数（R2）表： 3、回归系数显著检验表： 4、回归方程表： 四、多元线性回归分析（二元） 研究问题：个体的受教育水平受到父亲的受教育水平和母亲的受教育水平的净影响分别有多大？ 数据：1991 U. S. General Survey.sav 1、回归说明表： 2、判定系数（R2）表： 3、回归系数显著检验表： 4、回归方程表： 四、 多元线性回归分析（三元） 研究问题与研究假设：个体的受教育水平受到父亲的受教育水平、母亲的受教育水平以及配偶的受教育程度的影响。 数据：1991 U. S. General Survey.sav 1、回归说明表： 2、判定系数（R2）表： 3、回归方程显著检验表： 4、回归方程表： 四、 多元线性回归分析（四元） 研究问题：中国农村社区公共物品供给水平的影响因素：人均耕地数量、社会资本存量、村庄治理水平、集体资产数量。 SPSS数据：2007年“村庄社区公共品供给水平数据库.sav”(数据来自2007年“山东大学与Washington University”国际合作项目。) 1、回归说明表 2、判定系数（R2）表： 3、回归方程显著检验表： 4、回归方程表： 五、多元共线性的含义及其后果 1、完全共线性及其后果 在多元线性回归分析中，如果其中有一个自变量与其他自变量之间的关系存在完全线性相关关系 。 运用最小二乘法来求一套回归系数将导致