大数据技术应用与解决方案作业指导书.pdfVIP

大数据技术应用与解决方案作业指导书

第一章大数据技术概述2

1.1大数据概念与特点2

1.2大数据技术架构3

1.3大数据技术发展趋3

第二章数据采集与存储3

2.1数据采集技术3

2.1.1网络爬虫技术4

2.1.2数据接口技术4

2.1.3物联网技术4

2.1.4数据挖掘技术4

2.2数据存储技术4

2.2.1关系型数据库4

2.2.2非关系型数据库4

2.2.3分布式文件系统4

2.2.4数据仓库5

2.3分布式存储系统5

2.3.1HDFS5

2.3.2Ceph5

2.3.3GlusterFS5

2.3.4Cassandra5

第三章数据处理与计算5

3.1批处理计算技术5

3.1.1概述5

3.1.2常用技术5

3.1.3应用场景6

3.2流处理计算技术6

3.2.1概述6

3.2.2常用技术6

3.2.3应用场景7

3.3分