谷歌数据中心48V供电技术介绍.PDFVIP

谷歌数据中心48V供电技术介绍 腾讯IDC平台部数据中心规划组 李典林 随着数据中心需求不断增加，带来的能耗增长飞快，目前数据中心能耗占了全球用电量的 2%，预计到2020年，全美国的数据中心耗电量将高达 1400亿度电。目前全球数据中心整体能 效水平仍然偏高，据统计平均PUE高达1.8左右，为了降低能耗减少高昂的电费账单，大家在 机房层面做了很多优化工作 比如采用更高效率的UPS或者采用HVDC技术等 但在服务器层 面的能效关注度仍不够 假定机房PUE达到 1.2的优秀水平 但服务器电源效率假定只有60% 综合PUE只能相当于2.0 的较差水平，有一半能源都被浪费掉了。因此有必要引入服务器PUE （即SPUE）能效概念，让更多能源真正用于计算，这对于大型云计算数据中心而言特别重要。 传统数据中心采用UPS给服务器供电 在服务器层面 由服务器电源PSU将机房UPS 电 降压成12V，然后再通过服务器主板上的VR 降压模块分别降压到1.8V或者1.2V等不同电压 给到内存和CPU等。目前在PSU方面有能源之星等能效要求 基本都实现了80PLUS（即80%） 以上效率 甚至部分白金版PSU 电源还实现了94%上的高效率 且服务器主板上从12V到POL 负载点的降压VR模块通常采用了多相交错的BUCK降压模块（轻载下可关闭部分模块），也 基本实现了80%以上的供电效率 但从电网经过机房级UPS、再经过服务器级PSU 以及主板 级VR 降压模块的多级转换，从电网到CPU和内存的全路径供电效率只有60%到70%左右 这 意味着很大一部分能源都浪费在多级转换上了，因此有必要精简这一供电架构并提升转换效率。 为了降低设备投资成本并提高供电效率 现在大型互联网公司的服务器较多采用了集中电源 和风扇的整机柜服务器，比如一个传统的40 台机架式服务器机柜需要配80个PSU 电源模块 但每个电源的负载率只有30%左右，这种情况下PSU的投资成本很高，且PSU在较低负载下 的运行效率都是很不好的。改采用整机柜服务器后可能只需要8个PSU 并且PSU的负载率提 升到了60%到70%的较高效率点，无疑整机柜方式更为经济和高效，如下图由集中式PSU 电 源插框后的12V供电母排给服务器主板来供电。但这种采用12V集中母排的整机柜架构系统集 成度很高 在碰到大功率高性能计算场合 12V母排及主板上的低压传输会带来较多的传输损耗。 特别是随着现代高性能计算的需求 集成的晶体管数量在飞速增加 CPU核数也在不断增 加，计算频率和线程性能等整体向上，总功耗在快速增加。部分CPU 的负载电流高达150A 以及随着虚拟现实VR等需求 一些新的高功率器件如GPU等也在不断加大服务器的负载功耗 这个时候若仍采用12V的电压将会带来很大的损耗 因此采用更高电压传输变得越来越有必要。 但采用非传统12V的更高电压轨也会有很多新的挑战 比如针对高性能计算型CPU合适的 POL负载点VR 电源技术 以及这些降压VR模块的产业生态是否具备 供应商的专业能力是否 满足，是否能按时大量供货，是否有很好的应用可靠性，以及采用更高电压后带来的人身安全 以及可能的EMI （电磁兼容性）问题等，因此找到合适的电压轨就变得非常重要了。 经比较 谷歌最终选择了48V 的电压轨，因为这个电压等级在通信行业得已有广泛成熟的 应用，也有了很好的产业生态，而且非常容易实现很高效率和较低成本的48V整机架式UPS。 目前业界领先的48VUPS 电源效率可以高达97%以上 且由于在通信行业已广泛应用 48V 电 源的价格也比较低 此外48V 的锂电池也非常普遍在应用。采用48V母线 可以大大降低母排 的传输损耗 并可以将机柜的功率扩展到30KW甚至更高 可以很好满足未来的升级扩展需求。 目前很多网络设备都可以直接支持48V输入的电源模块 因此整机柜的TOR交换机等可以 直接从48V母排来供电 甚至风扇墙也可以直接从48V母排上供电 这样可以直接通过48V母 线统一给机柜内的IT设备、网络设备、UPS 电池以及机柜散热风扇墙等几乎所有部件供电 实 现机柜内供电归一化 类似今天通信行业48V 电源系统一样 可将IT行业和CT行业统一起来。 采用48V供电架构带来的最大挑战是服务器主板需要支持48V输入，谷歌对此的解决办法 是采用了如下的分布式供电架构，将服务器主板上的不同部件分别处理（传统12V主板也类似 有多个电源） 采用几