面向数据中心异构负载的低成本协同资源供应方法和系统1.pdf

第 10 卷第 5 期 信息技术快报 Vol.10 No.5 Information Technology Letter Sep. 2012 面向数据中心异构负载的 1 低成本协同资源供应方法和系统 詹剑锋 王磊 李晓娜 施巍松 翁楚良 张文耀 臧秀涛 翻译 周俊平 摘要: 最新的研究分析表明，服务器购置费用仍然是影响大规模数据中心或云系统开销的主要因素。在本 文中，我们认为经典的资源供应问题已经发生显著变化：异构负载已经成为大规模数据中心的常态，而目 前的资源供应方法并不能很好地应对这种异构性。本文报道了我们针对这一问题展开的工作。我们的贡献 有以下三个：首先，我们提出了一个协同资源供应的解决方案，通过充分利用异构负载的差异，降低在竞 1 争条件下的尖峰负载的资源消耗；第二，基于四种典型的异构负载：并行批处理作业、Web 服务、搜索引 v 擎和 MapReduce 作业，我们构建了支持异构负载的 PhoenixCloud 系统，能够有效地进行协同资源供应；第 2 9 三，我们通过使用真实和合成的负载日志进行实验对系统进行了综合的评价。实验结果显示，我们的解决 5 方案与现有的非协同解决方案相比可以极大节省服务器购置成本，该方案可以广泛用于当前的托管数据中 0 0 心或云系统中，如利用统计复用技术的 EC2 系统或实现了初步弹性资源供应技术的 RightScale 系统。 . 5 关键字：数据中心，云，协同资源供应，统计复用，成本，异构负载 0 6 1 1 引言 0 2 当前越来越多的计算和存储模式正在从类似PC 的客户端向数据中心[32]或（公共）云[21] : v i 系统转移，典型的例子有 EC2 服务和 Google Apps 。转向服务端计算的驱动力不仅是用户的 X 需求，如管理方便（无需配置或备份）和使用方便（支持通过浏览器[32] 的访问），还有大规 a 模数据带来的规模经济效益：大规模规模数据中心[32] 的成本相对于小规模数据中心可以节 n i 约 80%~90%[20][29] 。然而，大规模数据中心成本仍然很高。据报道在亚马逊[29] ，15 兆瓦（MW ） h c 的托管数据中心电力成本高达每月五百六十万美元。因此如何降低数据中心的成本对于资源 提供商是非常重要和紧迫的问题。 对于亚马逊和谷歌等数据中心的成本模型研究[32][44][46][51]获得了两点结论：第一，不同 于传统的企业系统，数据中心的人力成本因素已经从原来在总成本占很高比例转变到现在几 乎无关紧要[29] 。第二，服务成本中的服务器硬件成本贡献了最大的份额（超过一半），其他 成本还包括电源及冷却基础设施的成本、电力成本及其他基础设施的成本，这些成本很大程 度上也和服务器数量有关。针对这种情况，本文的重点是如何降低对服务器的需求，这是影 响数据中心成本中最重要的因素。 目前的降低服务器需求的解决方案可以分为两类：第一，基于虚拟化聚集的方式，其目 的是：（1）. 解决应用程序隔离或异构操作系统所造成的服务器扩张问题（即由于未充分利 用应用的服务器聚集特性，造成数据中心占用的空间和消耗的服务器或存储资源快速增长）； 1原文发表于IEEE Transaction on Comput