基于预测的数据中心应用服务节能调度系统.pdfVIP

基于预测的数据中心应用服务节能调度系统 基于预测的数据中心应用服务节能 调度系统 万言易 蒋平川 文高进 摘 要  随着数据中心规模的扩大和计算能力的提升，数据中心的能耗也急剧攀升，如何降低能耗，提高效率已经成为建 设大型数据中心的关键问题。设计具有节能意识的任务调度系统是新兴的且收效不俗的手段。本文将介绍一种基于对应用 服务耗时的准确预测来分配和管理运算节点上运行任务的数据中心应用服务调度系统，该系统可以为下一步设计高效、节 能和安全的数据中心管理系统提供良好的技术基础。 关键词  预测；任务调度；节能 1  引言 系统更具广泛性，也能达到更好的节能目标。 科学及企业应用对计算资源的高需求使高性能 2  相关工作 计算中心的规模不断增加。随之而来的中心能耗也 传统的集群调度系统采用先到先服务(FCFS) 急剧攀升，带来了在节能经济，低碳环保，和可持 模式对任务进行调度，不能达到比较好的资源使 续发展等方面的诸多问题。数据中心已凸显能耗危 用效率。一种优化方式是使用回填方法，让运行 机。在对深圳市的企业的调查中我们了解到，过60% 时间短的任务提前于其它们的提交顺序，利用运 的被访企业的数据中心面临着诸如散热、供电、成 行中的长任务存留的空余时间资源碎段运行。采 本等问题；另有40%的企业认为其数据中心供电和 用这种模式的调度系统有例如Moab Workload 散热能力的不足限制了IT基础设施扩展，导致无法部 [2,3] Manager 和Maui batch scheduler ，IBM的 署高密度计算设备。中心计算资源低效率运行，以 [4] [5] LoadLeveler ，以及OpenPBS 等。这些调度系统 及为机房提供环境的散热配电设备耗能过高，成为 会设定并使用任务的优先级，在优化系统资源利用 使中心节能高效必须解决的问题。软硬件提供商、 率的同时兼顾任务的运行要求。但它们都存在两个 企业和机构本身、政府等均开始从不同层面致力于 问题。一是使用回填方法进行优化的过程中，系统 降低数据中心的能耗，包括一系列措施诸如硬件架 需要依赖用户提供的预计任务运行时间。此值一般 构的革新，绿色节能机房的设计，虚拟化技术的应 都会存在较大的误差，影响系统的效率。二是所述 用，以及智能化的系统管理软件的使用。 系统都没有考虑运算节点的优先级，因此它们无法 使用具有能耗意识的数据中心任务调度系统是 兼顾节点的运行状况例如温度来进行任务调度，也 新兴的且收效不俗的节能方法。该方法在最大化利 无法指导节点休眠。而这正是节能调度非常重要的 用已运行的计算资源方面与传统的集群作业调度系 两个环节。将能耗引入任务调度的目标在集群虚拟 统相似，另外能够过即时监测集群中节点的运行温 化应用上有不少相关工作，例如[1,6,7,8]。这些工作 度预知机房热点的出现，并分流过热节点上的任务 研究了诸如如何聚合相关工作在节点上低耗运行， 让其休眠降温。研究表明这种主动避免过热节点出 迁移任务避免过热节点等问题，但并没有对休眠节 现的任务管理系统能有效地降低机房冷却设备的能