数据预处理异常值识别85课件讲解.pptxVIP

数据预处理—异常值识别

1异常值定义3异常值处理技巧2异常值检测方法目录

01异常值定义

异常值定义观察下面两组数据：身高：160公分、178公分、223公分、980公分表格:异常值：不符合正态分布、不符合业务逻辑的数据

一个调查组连续两年到校园调查大学生平均每月的生活费有多少。第一年平均每月生活费是2110元第二年计算出平均每月生活费是3780元第一年与第二年进行对比发现，平均涨幅将近80%举例：生活中的“被平均”背后的原因：受访者中，有1名富二代异常值定义

02异常值检测方法

异常值检测方法1、3σ准则方法：基于正态分布的检测方法-处于3个标准差之外的数值为异