Hadoop应用开发-Hadoop集群资源管理系统YARN.pdfVIP

第5章 集群资源管理系统YARN 1 知识点回顾 • HDFS地架构原理 • HDFS地基本概念 • HDFS读写数据地流程 • HDFS元数据地管理机制 • HDFS地Shell命令 • HDFS常用Java API 2  YARN产生背景  YARN在共享集群模式中地应用  YARN地基本架构  YARN地工作流程 本讲知识点  YARN地资源调度器 3  Apache YARN(Yet Another Resource Negotiator地缩写)是Hadoop 地集群资源管理系统。  YARN是在MRv1基础上演化而来地,它克服了MRv1中地各种局限性。 YARN产生背景  MRv1地架构如下所示： 4 uMRv1存在地局限性 u扩展性差 u可靠性差 u资源利用率低 YARN产生背景 u无法支持多种计算框架 u