Mapreduce原理和YARN.pptxVIP

Mapreduce原理和YARN;;硬盘存储成本不断降低 传输速率提升不大;Why MapReduce?;关系型数据库和MapReduce的比较：;二、Divide and Conquer(分而治之);分而治之;分而治之;MapReduce特性;MapReduce剖析图;MapReduce执行流程-MRv1;MapReduce执行流程-MRv2;MapReduce On Yarn;MapReduce执行流程-MRv2;? ?;? ?;? ?;JobTracker和TaskTracker简介;JobTracker失败;;MapReduce核心组;文件输入格式InputFormat;? ?;输入数据分块InputSplits;输入数据分块InputSplits;数据记录读入RecordReader;;Combiner; Partitioner ShuffleSort Partitioner Shuffle; Partitioner ShuffleSort Sort;Reducer;文件输出格式OutputFormat;MapReduce;MapReduce;MapReduce;MapReduce;单一Reduce处理;多个Reduce处理;无Reduce处理;Hadoop平台应用特点;MapReduce;MapReduce;YARN;;YARN-产生背景;Yarn 基本框架与组