《财务大数据分析与可视化》课件2、3 数据清洗 .pptx

数据清洗Datacleaning项目三?数据预处理Datacleaning

数据清洗的必要性◆对于数据挖掘来说，80%的工作都花在数据准备上面，而数据准备，80%的时间又花在数据清洗上。数据清洗顾名思义就是将“脏数据”进行清洗。◆什么是脏数据？重复数据错误数据缺失数据无效数据冲突数据脏数据

脏数据是怎么来的？数据清洗的必要性脏数据是怎么来的原因是多种多样的，最根本的原因就是数据的来源多样，使其数据的标准、格式、统计方法不一样。其次就是录入和计算数据的代码有错误，这也都是不可避免的。数据源多样不同人员录入来源数据标准不一致技术原因瑕疵计算代码错误录入错误

数据清洗是指发现并