第6章-Hadoop—分布式大数据系统.pptxVIP

云计算与大数据技术 ;目 录;第6章 Hadoop—分布式大数据系统;第6章 Hadoop—分布式大数据系统;;Hadoop设计时有以下的几点假设： 服务器失效是正常的； 存储和处理的数据是海量的； 文件不会被频繁写入和修改； 机柜内的数据传输速度大于机柜间的数据传输速度； 海量数据的情况下移动计算比移动数据更高效。 ;6.1　Hadoop概述;6.1　Hadoop概述;6.1　Hadoop概述;6.1　Hadoop概述;6.2　HDFS;6.2.1　HDFS文件系统的原型GFS;;6.2.1　HDFS文件系统的原型GFS;6.2.1　HDFS文件系统的原型GFS;6.2.1　HDFS文件系统的原型GFS;6.2.1　HDFS文件系统的原型GFS;6.2.1　HDFS文件系统的原型GFS;6.2.1　HDFS文件系统的原型GFS;;6.2.2　HDFS文件的基本结构;6.2.2　HDFS文件的基本结构;6.2.2　HDFS文件的基本结构;6.2.3　HDFS的存储过程;6.2.3　HDFS的存储过程;6.2.3　HDFS的存储过程;6.2.3　HDFS的存储过程;6.3　MapReduce编程框架 ;6.3.1　MapReduce的发展历史;6.3.2???MapReduce的基本工作过程;6.3.2　MapReduce的基本工作过程;6.3.2　MapReduce的基本工作过程