非集中调度模型下网格资源调度研究.docVIP

非集中调度模型下网格资源调度研究 　　摘要：针对当前网格资源调度系统扩展性差的问题，提出了基于非集中调度模型的以保守Backfilling算法为核心的网格资源调度算法。探讨了网格任务在站点处理器数目异构情况下，网格作业多站点协同调度问题。实验仿真证明，在跨网格站的资源调度中，运用资源预留策略和多站点作业分块可以改善作业的平均响应时间，并起到负载平衡的效果。?? 　　关键词： 网格计算； 资源调度； 非集中调度 　　中图分类号：TP302文献标志码：A 　　文章编号：1001－3695(2007)08－0030－04 　　 　　网格计算[1]的目标是提供最广泛的资源共享，实现以大规模计算和数据处理为特征的科学活动。网格任务的有效调度决定了资源的合理使用，是网格计算最重要的问题之一。网格资源调度本质上是跨多个站点（域）的，当前跨站点的网格资源调度算法大多是基于集中机制控制下的网格调度模型。这些模型通常假设具有一个全局调度器控制整个网格环境下的资源调度。显然，整个网格系统的扩展性能因此受到影响，并且存在单点失效问题。随着网格规模的扩大，网格调度系统的扩展性问题日益突出，基于全分布的非集中控制调度模型的网格资源调度算法的研究越来越受到重视。?? 　　 　　1相关研究工作?? 　　 　　Hamscher等人[2]对网格任务调度模型和调度策略作了深入描述和分析，将网格调度模型分为集中调度模型、层次调度模型和非集中调度模型三大类。集中调度模型和层次调度模型采用了集中控制的信息模型，能提供最高性能的调度方案；但是由于全局调度器的存在，整个网格系统的扩展性能受到影响，并且存在单点失效问题。非集中调度模型消除了集中调度模型的通信瓶颈，更具有可扩展性；此外单个调度器失效不会导致全局调度失败，使该模型容错能力也得到提高。但是由于调度器缺乏全局的资源和任务信息，实现起来比较困难，并且调度结果通常都不是全局最优的。?? 　　文献[3]提出了针对小范围内多个cluster之间任务调度的元调度器。为了综合考虑网络和计算资源，他们通过建立以网络带宽为中心的并行任务通信模型用以描述cluster之间的共享网络负载随时间的变化关系，在此基础上研究和设计了综合网格计算资源及网络资源的协同调度元调度器。该研究基于层次调度模型。文献[2]基于同构的网格资源模型，在比较几种网格调度模型的过程中，对非集中调度模型进行初步研究。试验表明，Backfilling算法对于提高系统的资源利用率大有帮助，并且在大多数情况下性能优于FCFS；但是其限定任务只能在同一个节点运行。Ramin Yahyapour[4]和Streit[5]设计了一种跨网格域的任务调度算法，针对Backfilling算法进行了集中调度模型下的多站点资源调度研究；但是他们将研究限定于站点同构，并且假设作业分块数量对作业的执行时间没有影响。然而在大多数情况下，上述关于作业执行时间的假设是不现实的。相比而言，非集中调度模型由于缺乏集中控制机制和全局网格资源信息，很少有人研究。本文尝试在Yahyapour和Streit的研究基础上，进一步研究非集中调度模型下的网格任务调度问题。着重考虑几个问题： 　　采用非集中调度模型；站点处理器数量的异构；作业分块对作业运行时间的影响。?? 　　在文献[6]提出了一个分布式网格资源发现模型。该模型提供了在全分布网格环境中发现网格范围内满足任务需求的资源集合能力。在该模型基础上，本文通过提出一种基于Backfilling机制的跨站点资源调度算法，探讨在非集中控制模型下网格资源调度的问题。?? 　　 　　2基于Backfilling跨站点调度模型及假设?? 　　 　　2．1系统假设?? 　　非集中控制模型网格任务的调度非常复杂，在此仅讨论针对计算资源共享的计算网格任务调度问题。对模型作出如下假设：?? 　　a）站点模型。计算网格由多个独立站点组成，每个站点包含若干计算资源。站点支持将本地网格资源与其他站点的网格资源组合而形成更大的网格资源集，从而提高网格资源的利用率并支持更大规模的网格任务运行。?? 　　b）计算资源模型。假设计算资源为cluster，每个站点包含多个cluster；每个计算节点都有自己的CPU、内存以及磁盘；cluster内部和cluster之间由高速网络互连，忽略站点内部的网络开销；同时，cluster支持空间共享模式。一个计算节点在同一时间只能运行一个任务，任务不能被抢占并且在任务提交到计算节点运行之后，任务对计算节点的需求不再变化。?? 　　c）网格任务模型。网格任务为批任务类型；同时假设网格任务具备在多个站点中并行执行的能力。任务在单个cluster上的任务长度为??T，则该任务在分块执行时，任务长度为[1]??