Hadoop应用开发-Hadoop分布式计算框架MapReduce.pdfVIP

  • 3
  • 0
  • 约5.79千字
  • 约 30页
  • 2022-05-05 发布于湖南
  • 举报

Hadoop应用开发-Hadoop分布式计算框架MapReduce.pdf

第6章 分布式计算框架MapReduce 1 知识点回顾  YARN产生背景  YARN在共享集群模式中地应用  YARN地基本架构  YARN地工作流程  YARN地资源调度 2  MapReduce概述  MapReduce处理过程  biner 本讲知识点  Partioner  MapReduce地输入处理类  MapReduce地输出处理类  MapReduce综合案例 3  MapReduce是一种可用于数据处理地编程模型。该模型比较简 ,将 一个作业划分为map与reduce两个阶段。  map阶段主要是将大量地数据进行拆分,并进行并行处理(体现了分 而治之地思想),此阶段处理地结果有可能是最终结果,如果不是最 MapReduce概述 终结果,则再转入到reduce阶段。  reduce阶段地作用是将map地输出进行整合汇总,

文档评论(0)

1亿VIP精品文档

相关文档