作业与资源管理系统.pptVIP

2.RMS的组成与结构 2.5 一个现代体系结构的特点 RCODINE（Computing in Distributed Networked Environment）和补充的GRD（Global Resource Direnctor），即CODINE/GRD，是基于现代体系结构的RMS系统 。CODINE/GRD都采用客户/服务器方式模式设计的。其功能由三种类型的守护进程提供： cod_qmaster：CODINE/GRD的主守护进程。是计算集群管理和调度活动的中心。Cod_qaster维护主机表、配置队列表、负载信息表和用户权限表。 cod_shedd:是CODINE/GRD的调度器。其功能是计算任务分配方案，将最后的方案发给cod_qmaster cod_exced:执行队列和队列中的作业 2.RMS的组成与结构 2.5 一个现代体系结构的特点 这三个进程是基于TCP/IP通信系统进行通信的，由cod_commd提供 目录 3.RMS的当前技术发展情况 3.1 基于自动策略的资源管理 高级资源利用策略以及自动增强的定义为RMS和它们的应用提供了一个新的功能层面：资源共享中心为不同的组织单元提供服务。提供这种能力的RMS已经可以使用，下面以GRD系统为例介绍自动管理策略的目标和功能 需求和目标 工作负载管理，是控制共享资源计算机使用，以最大程度的获得性能和目标。它是通过资源管理策略和尽量最大化资源利用率和系统吞吐量的工具来实现的。 为完成这些目标，管理解决方案需要比较有竞争关系的作业的重要性并将相同的并发作业关联。如果缺乏这种机制，将会有下列缺陷： 3.RMS的当前技术发展情况 3.1 基于自动策略的资源管理 应用程序很少会获得最佳的执行性能 重要的作业可能被延迟 未经授权用户通过大量提交作业，可能会获得较多系统资源 降低资源利用率，减少了吞吐量。并且需要更多的操作和管理介入 量化资源的可利用性和可利用程度 为防止作业不正当分配，任何地方的作业和他们的用户、工程和部门以及作业类相关联，以决定当新的作业提交时如何分配资源。 3.RMS的当前技术发展情况 3.1 基于自动策略的资源管理 策略模型 前面叙述过的资源管理策略，这里就不赘述 基于共享的 功能的 最后期限的 手工重载 下图对这些策略进行了综合描述 3.RMS的当前技术发展情况 3.1 基于自动策略的资源管理 3.RMS的当前技术发展情况 3.1 基于自动策略的资源管理 前面的策略是基于动态调度来实现的。这与大多数静态RMS调度行为差别很大。 3.RMS的当前技术发展情况 3.1 基于自动策略的资源管理 3.RMS的当前技术发展情况 3.2 作业支持的当前状况 对不同类型的作业，当前最先进的RMS提供了如下服务。 串行批处理作业 支持提交批处理作业，提供全面监控和记账的工具。 交互式支持 在RMS中，对于交互式作业，一个方法是打开一个完全交互的会话窗口。另一个方法是提供了一个终端连接（如LSF）。 并行支持 几乎所有RMS系统都支持并行，但是它们提供的支持由很大不同。 1.支持任意的或特殊的PPE（并行程序设计环节的接口） 3.RMS的当前技术发展情况 3.2 作业支持的当前状况 有俩种方式。一种是RMS系统中集成对一个或者多个PPE的支持接口。另一种方式是提供给PPE的那个接口是可以配置的，以便于任意一个程序设计环境进行集成。 检查点 一些RMS，如CODINE/GRD,CONDOR,LoadLeveler和LSF等，都给出了处理检查点作业的机制。但是LoadLeveler和LSF、Condor提供的是基于库的检查点机制。CONDINE/GRD没有提供检查点库。它们之间的区别在于应用范围。基于库的检查点机制不适用于第三方程序。 4.现在和将来所面临的挑战 下面提到的需求问题在现在或是将来会变得很重要，但是当前大多数RMS没有提供合适的解决办法。 4.1 开放接口 由于用户环境并不是严格的同构的，所以需要UNIX上的RMS需要集成到具有自己界面的第三方应用程序的开放环境以及开放系统管理软件中。 RMS需要应用程序接口(API)，CODINE/GRD提供的API主要特点是： 适用于CODINE/GRD的任何客户/服务器模式 扩充简单 有一个SQL接口 4.现在和将来所面临的挑战 4.2 资源控制与类似大型机的批处理 理想情况下，RMS可以控制很多可利用资源。但是大多数UNIX只为单个线程提供了资源限制。这样系统就无法提高可靠的资源控制 4.现在和将来所面临的挑战 4.2 异构并行环境 使用专门机器提供计算服务的计算中心需要更好地将并行机集