第2章 大数据技术基础.pptxVIP

第2章大数据技术基础;2.1云计算

2.1.1云计算的特点

2.1.2云计算与大数据处理

2.1基础架构支持

2.2.1Hadoop

2.2.2Hbase

2.2.3MapReduce

2.2.4Hive

2.2.5Python

2.2.6R语言

2.2.7维度建模

2.3数据采集

2.3.1数据的形态

2.3.2数据采集的方法

2.4数据存储

2.4.1数据存储的概念

2.4.2数据的存储方式

2.4.3常见数据源类型

实验2数据接入

;;2.1云计算;2.1.1云计算的特点

1.可扩展性：从资源低效率的分散使用到资源高效的集约化使用正是云计算的基本特征之一。

2.按需提供资源服务：云计算系统实现按需向用户提供资源能大大节省用户的硬件资源开支。

3.虚拟化：现在的云计算平台的重要特点是利用软件来实现硬件资源的虚拟化管理、调试及应用。

4.超大规模：应用于“云”的服务器数量就在几十万甚至上百万之多，“云”也会给用户带来前所未有的计算能力。

5.高可靠性和安全性：在使用“云”的服务的过程中，服务器使用了数据多副本容错、计算节点同构可互换等措施在保障服务的高可靠性。

;2.2.2云计算与大数据处理

云计算与大数据之间是相辅相成，相得益彰的关系。云计算就是硬件