《Hadoop批处理技术与应用》课件——第四章 Yarn与MapReduce原理与机制.pptxVIP

第四章Yarn与MapReduce

原理与机制

12Yarn的体系架构分析执行WordCount程序3Yarn的调度过程与资源分配4MapReduce的高级功能5什么是Shuffle？

Yarn的体系架构

第四章Yarn与MapReduce01

Yarn的体系架构简述第四章Yarn与MapReduceYARN主要是对hadoop集群资源进行管理。跟HDFS一样，他也是基于Master/Slave主从架构主要包括ResourceManager，NodeManager，ApplicationMaster。既然Yarn是主从架构，就存在单点故障的问题。需要使用ZooKeeper的方式来实现H