浅谈处理异常值方法和建议.pdfVIP

浅谈处理异常值的方法和建议 钱承1。田幼萌2 北京市海淀Ⅸ计i检测所，北京lO呻83．2M安交通大学，日安71∞帕 [摘要】异常值的判别是一个比较困难而且叉需要特别慎重的工作。文章基于统计学理论，对异常值的常用处理方法 拉依达准则、格拉布斯准则的特点做出了简要分析。选取相同的测量数据，利用不同的判别方法可能会导致不同的判 别结果。因此，科学合理地判别异常值具有重要意义。 [美键词]异常值；拉依达；格拉布斯 l异常值 2判别异常值常用的统计方法 异常值(abn0瑚dvdue)叉称离群值(oudier)，2．1拉依达准则(3Ⅱ准则) 指在对一个被测量的重复观测中所获的若干观测结果 用拉依达准则判断粗大误差的基本思想是以给定的 中．出现了与其他值偏离较远且不符合统计规律的个 置信概率997％为标准，以三倍测量列的标准偏差限为 别值，它们可能属于来自不同的总体，或属于意外 依据，凡超过此界限的误差，就认为它不属于随机误差 的、偶然的测量错误：也称为存在着“粗大误差”。 的范畴，而是粗大误差，应该从测量数据中剔除。 产生异常值的因素可以大致归纳为以下3点： 若对被测量j作n次独立测量，得到测量列x． (1)测量条件方面的斟素 (K1，2，，n)的平均值*及残余误差q=t—z， 在测量过程中，由于测量条件意外地改变，引起 并按贝塞尔公式算出废测量列的标准偏差s，如果某 测量仪器示值的突然跳动或者被测量状态的瞬间改变 测量值的残余误差满足 等而产生异常值。例如，仪器电源电压的突然增加或 k≥3s 降低、机械冲击等外界振动使被测量的位置变动、测 则认为t是含有粗大误差的异常值，应该剔除。 量环境温度的骤升或骤降等。 拉依达准则在工程、教学上普遍采用，但首先应 (2)测量人员的主观因素 明确其适用范围。该准则只有在n较大时才适用，n 由于测量人员缺乏经验、对测量仪器的熟悉与掌 较小时．即使测量列中存在异常值，也不能判断出来 握程度不够等原因．造成操作不当；或者是在测量过 予以剔除，证明如下： 程中粗心大意而出现读数错误、记录错误、计算错误 例如对某物理量进行10次独立测量，测量数据 等。例如，有些测量仪器读数装置的刻度是非线性 如表l所示。 的，但是测量人员在两个刻度分度之间采用线性内插 表1测量数据裹 读数等。 (3)测量仪器方面的因素 使用有缺路的测量仪器或者测量仪器内部的偶然 失效，例如测量仪器工作不稳定、仪表机械故障、传 动部件卡住或跳动、零位抖动等原因也会产生异 常值。 异常值总有可能出现在测量列之中。在进行数据 处理时，如果过分地剔除随机误差较大的正常测量数 据，则会造成测量系统准确度偏好的假象；反之，如 果没有剔除含有粗大误差的异常值，则会造成测量系 统准确度偏低的后果。因此对含有异常值的测量数据 进行正确的判别和处理，减少其对测量结果的影响， 显然x，=10．02为不符合统计规律的个别值，应 是获得正确测量结果的重要前提之一。 予以剔除。 [收稿日期】2012—02—26 工业计量如”年增刊2 采用拉依达法则加以判断 99或 大者为可疑值扎，在给定的置信概率为P=o 01或n=