面试hadoop可能被问到的问题,你能回答出几个.pdfVIP

1、hadoop 运行的原理 ? hadoop 主要由三方面组成 : 1、HDFS 2、MapReduce 3、Hbase Hadoop框架中最核心的设计就是： MapReduce和 HDFS。MapReduce的思想是由 Google 的一篇论文所提及而被广为流传的， 简单的一句话解释 MapReduce就是 “任务的分解与结果的汇总”。 HDFS是 Hadoop分布式文件系统（ Hadoop Distributed File System ）的缩写 ，为分布式计算存储提供了底层支持。 MapReduce从它名字上来看就大致可以看出个缘由，两个动词 Map和 Reduce， “Map（展开）”就是将一个任务分解成为多个任 务， “Reduce”就是将分解后 多任务处理的结果汇总起来， 得出最后的分析结果。 这不是什么新思想， 其实在 前面提到的多线程，多任务的设计就可以找到这 种思想的影子。不论是现实社 会，还是在程序设计中， 一项工作往往可以被拆分成为