[第3章数据的整理与显示统计整理.pptVIP

第 3 章 统计整理 数据的预处理 数据的审核 检查数据中的错误 数据的筛选 找出符合条件的数据 数据排序 升序和降序 寻找数据的基本特征 数据审核 数据审核—原始数据(raw data) ? 审核的内容 完整性审核 检查应调查的单位或个体是否有遗漏 所有的调查项目或指标是否填写齐全 准确性审核 检查数据是否真实反映客观实际情况，内容是否符合实际 检查数据是否有错误，计算是否正确等 数据的审核—原始数据(raw data) ?审核数据准确性的方法 逻辑检查 从定性角度，审核数据是否符合逻辑，内容是否合理，各项目或数字之间有无相互矛盾的现象 主要用于对分类和顺序据的审核 计算检查 检查调查表中的各项数据在计算结果和计算方法上有无错误 主要用于对数值型数据的审核 数据的审核—二手数据(second hand data) 适用性审核 弄清楚数据的来源、数据的口径以及有关的背景材料 确定数据是否符合自己分析研究的需要 时效性审核 尽可能使用最新的数据 确认是否必要做进一步的加工整理 数据筛选与排序 数据筛选(data filter) 当数据中的错误不能予以纠正，或者有些数据不符合调查的要求而又无法弥补时，需要对数据进行筛选 数据筛选的内容包括 将某些不符合要求的数据或有明显错误的数据予以剔除 将符合某种特定条件的数据筛选出来，而不符合特定条件的数据予以剔除 数据筛选(data filter) ?用Excel进行数据筛选 数据排序 (data rank) 按一定顺序将数据排列，以发现一些明显的特征或趋势，找到解决问题的线索 排序有助于对数据检查纠错，以及为重新归类或分组等提供依据 在某些场合，排序本身就是分析的目的之一 排序可借助于计算机完成 数据排序 (方法) 分类数据的排序 字母型数据，排序有升序降序之分，但习惯上用升序 汉字型数据，可按汉字的首位拼音字母排列，也可按笔画排序，其中也有笔画多少的升序降序之分 数值型数据的排序 递增排序：设一组数据为x1，x2，…，xn，递增排序后可表示为：x(1)x(2)…x(n) 递减排序：可表示为：x(1)x(2)…x(n) 分组标志的选择和分组形式 （一）按分组标志的性质不同，分为按品质标志分组和按数量标志分组 按数量标志分组示例 分组表－按数量标志分组示例之二 （二）按分组标志的多少，有简单分组和复合分组1.简单分组表 ：表的主词未经任何分组，仅列出总体各单位的名称或按时间顺序简单排列的统计表。 简单表举例： 2.复合分组表：指表的主词按两个以上的标志进行分组的统计表。 频数分布 分组方法 单变量值分组(要点) 1. 将一个变量值作为一组 2. 适合于离散变量 3. 适合于变量值较少的情况 举例：单项变量数列 按日产量分组 工人人数 比重 （件） （人） （%） 25 10 6 26 20 10 27 30 17 28 50 28 29 40 22 30 30 17 合计 180 100 组距分组 (要点) 将变量值的一个区间作为一组 适合于连续变量 适合于变量值较多的情况 需要遵循“不重不漏”的原则 可采用等距分组，也可采用不等距分组 组距分组(步骤) 确定组数：组数的确定应以能够显示数据的分布特征和规律为目的。在实际分组时，可以按 Sturges 提出的经验公式来确定组数K 组距分组(几个概念) 1. 下限(low limit) ：一个组的最小值 2. 上限(upper limit) ：一个组的最大值 3. 组距(class width) ：上限与下限之差 4. 组中值(class