Hadoop大数据平台部署与应用.pptVIP

Hadoop大数据平台部署与应用 主讲：吕震宇 主要内容 1、Hadoop 生态系统概述以及版本演化 2、Hadoop 发行版介绍（开源版） 3、Hadoop 安装 4、HDFS 上机操作 5、HBASE 上机操作 6、YARN 上机操作 7、MapReduce 上机操作 8、SPARK 概述 1、Hadoop 生态系统概述以及版本演化 Hadoop 1.0 与 Hadoop 2.0 分布式存储系统 HDFS（Hadoop Distributed File System） 提供了高可靠性、高扩展性和高吞吐率的数据存储服务 分布式计算框架 MapReduce 具有易于编程、高容错性和高扩展性等优点 资源管理系统 YARN（Yet Another Resource Negotiator） 负责集群资源的统一管理和调度 HADOOP 1.0 HADOOP 2.0 HDFS (redundant, reliable storage) MapReduce (cluster resource management data processing) MapReduce (data processing) Others (data processing) YARN (cluster resource management) HDFS (redundant, reliable storage) H