数学建模与实验课件 8.1 数据预处理.pptxVIP

第8章统计分析

8.1数据预处理

8.2线性回归分析

8.3分类分析

8.4建模案例：中药材的产地鉴别

1

统计学研究的目的，通常是从大量数据中找规律性，找不同因素之间的

相关性，以及可能存在的因果关系.

数据分析的目标是从大规模数据中挖掘有价值的信息，并帮助企业做出

更精准的决策.

统计分析是大数据分析的基础.

多元统计分析是多变量的统计分析方法，包括回归分析、判别分析、主

成分分析、因子分析、聚类分析、分类分析、相关分析等内容.

本章介绍数据处理、主成分分析、回归分析、分类分析等内容及其应用.

数据一般是不完整的、有噪声的，存在缺失值、重复值或异常值等情况.

数据分析之前要加载数据、清理数据、转换数据.

pandas库有大量函数和方法用于快速地处理数据.

pandas中有两个主要的数据结构，分别是Series和DataFrame.

DataFrame类型是一种表格型的数据结构

8.l.l数据处理

8.l数据预处理

l使用“变量名.isnull()”查看哪些值是缺失的.

l对于DataFrame对象，对象名.dropna（）函数默认删除含有缺失值的行.如果想删除含有缺失值的列，需传入axis=1作为参数；如果想删除全部为缺失值的行或者列，需传入how=all作为参数.

l使用“对象名.fi