Hadoop体系架构概述备份 .ppt

Hadoop体系架构概述; ;Hadoop概述; 分布式文件系统（Hadoop Distributed ，HDFS） 并行计算模型（Map/Reduce） 列式数据库（HBase） 数据仓库（Hive） 数据分析语言（Pig） 数据格式转化工具（Sqoop） 协同工作系统（Zookeeper） 数据序列化系统（Avro） ;Hadoop整体框架下特点; ;HDFS概述-----基本特征;HDFS的对现实应用环境的假设及其目标;;HDFS架构; ;Map/Reduce简介;Map/Reduce概念;Map/Reduce模型; 一次Map/Reduce任务过程。用户提交任务给JobTracer，JobTracer把对应的用户程序中的Map操作和Reduce操作映射至TaskTracer节点中；输入模块负责把输入数据分成小数据块，然后把它们传给Map节点；Map节点得到每一个key/value对，处理后产生一个或多个key/value对，然后写入文件；Reduce节点获取临时文件中的数据，对带有相同key的数据进行迭代计算，然后把终结果写入文件。 ;Map/Reduce优缺点; ;Hbase简介;Hbase数据模型;HBase下表的逻辑视图;HBase下表的物理视图; 一张表创建的初始阶段其中只含有一个Region，随着表中数据的量的不断增多，一