数据中心规模与成本现状分析.docxVIP

数据中心规模与成本现状分析 数据中心规模与成本现状分析 数据中心成本与利用率现状分析 关键词：数据中心利用率　服务质量　PARD 包云岗　马久跃 中国科学院计算技术研究所 高奖”1揭晓，“百度通用资源管理项目”（代号为Matrix ），获得百万美元大奖。Matrix 项目由百度数据中心管理团队开发，目标是克服当前数据中心管理所面临的世界级难题。这其实是该团队第二次获奖，2021年他们开发的“服务器潜能激发技术”也获得了“百度最高奖”。可见，百度因为正是百度数据中心的几十万台服务器支撑着百度公司每年数百亿的收入。 Matrix 项目要解决的是什么样的世界级难题呢？宏观上来讲，就是实现成本与收益之间的平衡，用尽可能低的数据中心成本来实现尽可能大的企业收益。 2021年8月8日“百度最 端移动计算+后端数据中心”的场景。我们触按手机屏幕后，手机就会将“触按”这个动作转变为一个网络请求，发送到后端运然后再通过网络传回来，在手机屏幕上显示（如图1所示）。这个过程大概需要2~4秒，其中一大半时间消耗在数据中心内。正是数据中心在后台支持着全世界 2021年，时任微软首席执行官的斯蒂夫·巴尔默在全球合作 伙伴大会的主题演讲中提到，“我们（微软）的数据中心已超过100万台服务器，谷歌比我们更大一些，亚马逊比我们稍小一点。万台的量级。所以真正理解和管理如此大规模的数据中心，并提供公有云服务的企业是屈指可数的。”而国内的几家互联网巨头也都拥有超过30万台服务器的规模，并且正朝着100万台的规模快速发展。 在很多企业看来，数据中心规模属于商业秘密，因 行云应用的数据中心进行处理，雅虎和脸谱等其他企业大概是10 对数据中心管理技术非常重视，数十亿网民的各种请求。 数据中心处理时间 约占50~60% 数据中心已经成为我们生活的一部分，比如我们使用各种手机App 上网，就是一个典型的“前 图1　数据中心已成为社会的基础设施 “百度最高奖”是由百度公司首席执行官李彦宏于2021年7月提出的。这是百度公司最高级别的奖项，主要针对公司总 监级别以下的对公司作出卓越贡献的基层员工，奖励对象为10个人以下的小团队。 （约125亿元人民币）；此外还需要配备至少300MW 的供电系统，还需要建15~30个机房。这些加起来大概需要22.5亿美元。所以100万台服务器的总建设成本大概是42.5亿美元（约260亿元人民币）。 这些只是建设成本，另外还需要服务器维护和更新成本，包括每年要消耗掉约26亿度电（约15亿元人民币），服务器一般3~5年就会淘汰，需要购置新服务器。所以，就算5年更新一轮，那么仅电费就需要75亿元，服务器更新又需要125亿元。相当于数据中心5年的运行维护成本是200亿元，平均每年40亿元。当然，这个估算是针对比较便宜的服务器，其实一般用于计算的服务器价格都会在2万元以上，所以仅购买服务器成本就会超过 为很容易根据数据中心规模推测该企业的业务规模以及发展规于是有很多好奇者采用各种方式去推测超级互联网企业的数据中心规模，例如斯坦福大学教授乔纳森·库梅(Jonathan Koomey) 曾根据数据中心的用电量比较准确地推断出谷歌在2021年大约·拥有90万台服务器。而詹姆斯皮恩(James Pearn) 根据数据中心的占地面积、每个机架的尺寸、服务器的尺寸等数据，估算了谷歌在全球各个数据中心能容纳的服务器数量（如表1）2。根据皮恩的估算，谷歌的数据中心已经可以容纳230万台服务器（实际数量应该比估算值小）。 100万台服务器的成本是多 少呢？我们可以参考被称为文艺复兴式的黑客——詹姆斯·汉密密尔顿是负责亚马逊网络服务(Amazon Web Services, AWS)数据中心的杰出工程师，之前在微2021年《连线》网站上曾经有一 划，所以很多企业都不愿意透露。尔顿在博客中的一些数据。汉 软负责必应(Bing)的数据中心。200亿元。篇文章《亚马逊为何聘用一名修车工管理云帝国？》专门介绍了这位开着游艇掌管亚马逊价值数十亿美元数据中心的极客3。 在巴尔默透露微软拥有100·万台服务器的数字后，詹姆斯汉密尔顿写了一篇博客“Counting Servers is Hard ”，来估算100万台服务器的成本：如果每台服务器很便宜，只需2000美元的话，那么购买服务器需要20亿美元 这么大规模的数据中心的利用率如何？图2(a)是2021年谷歌的5000台服务器的平均CPU 利用率分布，这些服务器运行的是搜索、Gmail 等在线应用。从图(a)可以看出，这