换个角度看问题——探索性数据分析方法应用初探.pdfVIP

《数理统计与管理》增刊 2003年10月 换个角度看问题 ——探索性数据分析方法应用初探 朱钰 张颖 内容摘要：文章利用SPSS统计分析软件的内置数据组，提供了一个关于探索性数据 分析中的数据转换方法在经济统计分析中的应用的教学案例，说明了探索性数据分 析“换一个角度看问题”的重要统计分析思想。 关键词：探索性数据分析、数据转换 article an asetofbuiIt—indatainSPSS，this provides Abstract：Using ofdatatransformationin data example exploratory datafromanother the at angle．’’ importanceof“looking data transformation． Keywords：exploratoryanalysis，data 探索性数据分析为我们的经济统计分析提供了灵活多样的实用方法，极大的丰富了我 们的统计分析工具库。其中的数据转换方法更使我们对数据中存在的内部关系或内部联系 的探寻变得灵活而深入。也对我们进一步深入认识统计分析的本质含义起到极大的推动作 用。 法对于理解数据所包含信息的作用。可以作为统计教学的一个良好的案例。探索性数据分 析非常强调的一个方面就是当从某一个角度看数据，得不到什么可以理解的结论时，“换一 个角度看问题(数据)”。当我们进行统计分析时，如果原始数据中的各变量之间没有表现 出易于理解的关系或模式时，往往需要对数据进行必要的转换，对转换以后的数据进行分 析，以求达到对数据内部各变量之间联系的更进一步认识，或者使数据内部的联系变得更 容易解释。 所谓数据转换就是对一个变量的各个取值进行系统的线性或非线性变换。其中，线性 变换是指对各数值同加减或同乘除～个数，或同加减和同乘除一个数。这种变换通常不会 改变变量的频数分布的表现。即反映变量频数分布状况的统计图如直方图、茎叶图等的外 观不会有任何变化。而非线性变换是指对原始数据(变量)取某一次幂或对数，变换的结 2003年10月 中国现场统计研究会第十一届学术年会论文集 369 果直接影响到频数分布图的形状。 示两个变量之间的关系，结果该散点图呈发散状(图1)，让人很难看憧，更难以跟非统计 专业的人解释两个变量之间的关系。从理论上看，两个变量应该有强相关关系，而从图1 也可以看出两者之间的关系不属曲线。但是图1左下角的一大堆让人难以辨别的点实在让 笔者不敢妄下断语。只是借助于图中的LOWESS(递归局部加权最小平方法)曲线才可以看 出大体上两者之间有一种直线关系。 当 前 工 赍 起始工资 图I 当前工资对起始工资的散点图 为了进一步探寻两者之间的关系，笔者对原始数据进行了对数转换，既对“当前：r资” 和“初始工资”都取对数。然后再做散点图(图2)。 对数起始工资 图2对数当前工资对对数起始工资的散点图 370 《数理统计与管理》增刊 2003年