YARN ResourceManager调度器分析.pdfVIP

YARN ResourceManager 调度器的分析 1. 前言 1.1. 文档说明 YARN 是 Hadoop 新版中的资源控制框架。本文旨在深入剖析 ResourceManager 的调度器，探讨三种调度器的设计侧重，最后给出一些配置建议和参数解释。 1.2. 名词解释 ResourceManager ：以下简称 RM。YARN 的中控模块，负责统一规划资源的使用。 NodeManager ：以下简称 NM。YARN 的资源结点模块，负责启动管理 container。 ApplicationMaster ：以下简称 AM。YARN 中每个应用都会启动一个 AM，负责向 RM 申请资源，请求 NM 启动 container，并告诉 container 做什么事情。 Container ：资源容器。YARN 中所有的应用都是在 container 之上运行的。AM 也是在 container 上运行的，不过 AM 的 container 是 RM 申请的。 2. RM 中的调度器 ResourceManager 是 YARN 资源控制框架的中心模块，负责集群中所有的资源的统 一管理和分配。它接收来自 NM 的汇报，建立 AM，并将资源派送给 AM。