大数据应用技术与数据挖掘操作手册.docVIP

大数据应用技术与数据挖掘操作手册

TOC\o1-2\h\u31953第1章大数据基础概念 4

230531.1数据与大数据 4

306601.1.1数据的概念 4

18061.1.2大数据的概念 4

178701.2大数据技术栈 4

45821.2.1数据采集与存储 4

271461.2.2数据处理与分析 5

276571.2.3数据挖掘与可视化 5

183621.3数据挖掘概述 5

196601.3.1数据挖掘的定义 5

321441.3.2数据挖掘的任务 5

209991.3.3数据挖掘的过程 5

27725第2章数据采集与预处理 5

129742.1数据采集技术 5

192932.1.1网络爬虫技术 6

316222.1.2数据库采集技术 6

8602.1.3物理设备采集技术 6

199902.2数据预处理方法 6

14422.2.1数据集成 6

72992.2.2数据归一化 6

208062.2.3数据离散化 6

289262.3数据清洗与转换 6

64632.3.1数据清洗 7

15142.3.2数据转换 7

23694第3章数据存储与管理 7

235253.1分布式存储系统 7

21853.1.1概述 7

95543.1.2关键技术 7

160733.1.3常见分布式存储系统 7

233303.2数据仓库技术 8

254193.2.1概述 8

114953.2.2数据仓库架构 8

319313.2.3数据仓库技术发展 8

200873.3大数据查询技术 8

113.3.1概述 8

306313.3.2分布式查询 8

106853.3.3并行查询 8

202013.3.4索引技术 8

231823.3.5查询优化 8

32210第4章数据分析方法与模型 9

231374.1统计分析方法 9

263194.1.1描述性统计分析 9

152624.1.2假设检验 9

280594.1.3方差分析 9

108414.1.4回归分析 9

41384.2机器学习算法 9

35944.2.1决策树 9

153964.2.2支持向量机 10

229334.2.3朴素贝叶斯 10

279564.2.4集成学习 10

12634.3深度学习技术 10

170654.3.1卷积神经网络（CNN） 10

175804.3.2循环神经网络（RNN） 10

284764.3.3对抗网络（GAN） 10

305184.3.4自编码器 10

15356第5章数据挖掘算法应用 10

154855.1关联规则挖掘 11

244965.1.1概述 11

52145.1.2Apriori算法 11

138735.1.3FPgrowth算法 11

2785.1.4关联规则挖掘的应用实例 11

326365.2聚类分析 11

221395.2.1概述 11

196105.2.2Kmeans算法 11

255575.2.3层次聚类算法 11

124345.2.4密度聚类算法 11

218875.2.5聚类分析的应用实例 11

158625.3分类与预测 11

217085.3.1概述 11

240105.3.2决策树算法 11

245055.3.3朴素贝叶斯分类器 12

130295.3.4支持向量机（SVM） 12

244265.3.5神经网络算法 12

53575.3.6分类与预测的应用实例 12

31643第6章大数据分析平台 12

185916.1Hadoop生态系统 12

231286.1.1Hadoop概述 12

18046.1.2Hadoop核心组件 12

140166.1.3Hadoop生态系统周边工具 12

132866.2Spark计算框架 12

201306.2.1Spark概述 12

253676.2.2Spark核心组件 12

261586.2.3Spark运行模式 13

41536.3Flink实时计算 13

230636.3.1Flink概述 13

16