科研数据分析方法论.docxVIP

科研数据分析方法论

目录

内容综述与理论基础．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．5

1.1研究背景与意义阐述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．6

1.1.1从事探究活动的环境背景．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．10

1.1.2探索性工作的价值体现．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．13

1.2数据解析的基本概念界定．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．15

1.2.1数据内涵及多样形态．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．17

1.2.2分析逻辑与模式识别．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．19

1.3数据分析方法论体系概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．21

1.3.1主要构成要素介绍．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．23

1.3.2该学科范畴的整体结构．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．26

数据采集与准备阶段．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．27

2.1数据源头的确立与搜寻．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．28

2.1.1资料获取途径的选择．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．35

2.1.2多种信息来源的比较分析．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．37

2.2数据质量的初步评估．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．39

2.2.1关键信息完整性的检验．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．41

2.2.2不一致性问题的初步发现．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．43

2.3数据的规范化与洗涤流程．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．44

2.3.1格式统一化处理．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．46

2.3.2错误值或缺失值管理．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．47

2.4数据库的构建与存储管理．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．49

2.4.1结构化存储规划．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．54

2.4.2安全与可访问性保障．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．55

2.5数据转化为训练样本．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．57

2.5.1原始资讯的结构化转换．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．60

2.5.2特征向量的提取方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．61

探索性数据分析方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．66

3.1数据分布形态特征观测．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．68

3.1.1集中趋势与离散程度度量．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．70

3.1.2变量间相互关联度初步判断．．．．．．．．．．．．．．．．．．．．．．．．．．．．72

3.2数据可视化技术手段运用．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．75

3.2.1多维图表构建与解读．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．77

3.2.2直观模式呈现策略．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．78

3.3普查性分析模型构建．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．80

3.3.1基于统计推断的假设测试．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．81

3.3.2理论假设的初步验证．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．83

统计推断与理论验证技术．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．86

4.1参数估计与区间构建．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．87

4.1.1总体参数的数值推断．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．