Hadoop平台搭建与应用_教学课件全套.pptx

项目一认识大数据;;;知识目标;;（1）熟悉大数据的概念和特征。

（2）熟悉大数据分析流程和工具使用。

（3）学会VMware和Ubuntu的安装。

（4）学会Hadoop的安装与配置。

;;大数据运行流程图;1.采集;虽然采集端本身会有很多数据库，但是如果要对这些海量数据进行有效的分析，还是应该将这些来自前端的数据导入到一个集中的大型分布式数据库（SequoiaDB）或者分布式存储集群（OneProxy）中，并且可以在导入基础上做一些简单的清洗和预处理工作。也有一些用户会在导入时使用来自Twitter、LinkedIn等公司相继开源的流式计算系统Storm、分布式发布订阅消息系统Kafka