MapReduce模型简介96课件讲解.pptVIP

MapReduce模型简介

2学习任务初步了解MapReduce框架初步探索MapReduce的编程方式

3知识目标什么是MapReduce模型MapReduce模型主要有哪些应用01能力目标了解MapReduce模型了解MapReduce的五种编程模型02学习目标

4目录01MapReduce编程模型的框架02详解五种编程模型

5MapReduce编程模型的框架MapReduce编程模型大致分为三层，用户程序层、工具层、编程接口层。

6MapReduce编程模型的框架Jobcontrol是为了监控Hadoop中的MapReduce向集群提交复杂的作业任务，提交了任务到集群中后，形成的任务是一个有向图。每一个任务都有两个方法。chainMapper和chainReducer的这个模块，是为了用户编写链式作业，形式类似于Map+ReduceMap*,表达的意思就是只有一个Reduce,在Reduce的前后可以有多个Map。HadoopStreaming支持的是脚本语言，例Python、PHP等来调用Hadoop的底层接口,HadoopPipes支持的是C++来调用。工具层

7详解五种编程模型作用：InputFormat对输入进入MapReduce的文件进行规范处理，主要包括InputSplit和RecordReader两个部分。TextOu