Hadoop生态系统简介81课件讲解.pptVIP

Hadoop生态系统简介

2学习任务认识Hadoop了解Hadoop项目的主要模块Hadoop应用现状和发展趋势

3知识目标01能力目标02学习目标理解什么是Hadoop了解Hadoop项目的主要模块了解Hadoop的其他项目理解使用Hadoop的原因

4目录01全面认识Hadoop02Hadoop项目的主要模块03Hadoop应用现状和发展趋势

5全面认识Hadoop什么是Hadoop（1）Apache的Hadoop项目是可靠的、可扩展的、开源的、分布式计算软件。Apache的Hadoop软件库是允许通过相对简单的程序模型构建计算集群为庞大的数据集进行分布式计算的框架。（2）Hadoop的设计思想可以将计算模式从单节点服务器扩展为数以千计的计算集群，每一个单独的服务器都提供自主的本地计算及存储能力。（3）对于高可用指标而言，Hadoop软件库自身可以通过检测和故障调试从应用层来实现高可用而不需要关心硬件底层的高可用性。所以提供一个计算集群上层的高可用服务对于集群故障修复而言就显得至关重要。

6Hadoop项目的主要模块Hadoop项目主要包含了以下模块：（1）Hadoop通用模块：通用模块用于为Hadoop项目提供其他模块的支持。（2）Hadoop分布式文件系统（HDFS）：HDFS是一个支持应用数据高吞吐的分布式文件系统。（3）HadoopYARN：YARN是被用于任务调