大数据应用开发与实战手册.docVIP

大数据应用开发与实战手册

TOC\o1-2\h\u31796第1章大数据基础概念 4

314171.1大数据定义与特征 4

251481.2大数据技术架构 4

264151.3大数据应用领域 5

14290第2章大数据生态系统 5

127072.1Hadoop生态系统概述 5

88202.1.1Hadoop核心组件 5

43262.1.2Hadoop生态系统相关组件 6

122382.2Spark生态系统介绍 6

198562.2.1Spark核心组件 6

64762.2.2Spark生态系统相关组件 6

188842.3Flink与Storm流处理技术 6

136352.3.1Flink 6

51832.3.2Storm 7

2645第3章分布式文件存储系统 7

185943.1HDFS原理与实战 7

243173.1.1HDFS概述 7

203163.1.2HDFS工作原理 7

118713.1.3HDFS实战 7

249943.2Alluxio内存加速器 8

299173.2.1Alluxio概述 8

67373.2.2Alluxio架构 8

66483.2.3Alluxio实战 8

252623.3对象存储与云存储 8

108793.3.1对象存储概述 8

169923.3.2常见对象存储系统 8

279513.3.3云存储实战 8

5153第4章分布式计算框架 9

279314.1MapReduce编程模型 9

278864.1.1基本原理 9

124464.1.2编程接口 9

127394.1.3应用实例 9

186014.2Spark计算框架 9

307544.2.1基本原理 9

9354.2.2核心概念 10

286674.2.3应用实例 10

103134.3Flink计算框架 10

188634.3.1基本原理 10

327654.3.2核心概念 10

248964.3.3应用实例 10

30177第5章数据仓库与OLAP技术 10

327505.1Hive数据仓库 10

303105.1.1Hive基本原理 11

204335.1.2Hive架构 11

238165.1.3Hive在数据仓库中的应用 11

146405.2Impala与Presto即席查询 11

268165.2.1Impala基本原理 11

244865.2.2Presto基本原理 11

136035.2.3Impala与Presto的对比 12

259385.3ClickHouse与DruidOLAP技术 12

259225.3.1ClickHouse基本原理 12

32385.3.2Druid基本原理 12

222215.3.3ClickHouse与Druid的对比 12

21906第6章数据采集与清洗 12

99896.1数据采集技术 12

228106.1.1网络爬虫技术 12

247016.1.2数据库采集技术 13

324166.1.3物联网数据采集 13

81316.1.4非结构化数据采集 13

164826.2数据清洗与预处理 13

118746.2.1数据清洗 13

84416.2.2数据预处理 13

201906.3数据集成与ETL 13

168706.3.1数据集成技术 13

24506.3.2ETL过程 13

19312第7章数据存储与处理 14

24687.1关系型数据库 14

62247.1.1关系型数据库概述 14

210927.1.2关系型数据库的关键技术 14

276617.1.3常见关系型数据库 14

63537.1.4关系型数据库在大数据应用中的挑战与应对 14

289217.2NoSQL数据库 14

107787.2.1NoSQL数据库概述 14

253717.2.2键值存储数据库 14

203097.2.3文档型数据库 14

142407.2.4列存储数据库 14

245167.2.5图数据库 14

195817.3图数据库 15

323447.3.1图数据库概述