超级计算机机房设计与管理-上海超级计算中心.PDFVIP

交流之窗 61 超级计算机机房设计与管理  张颖琪 上海超级计算中心 上海201203 yqzhang@ssc.net.cn 前言 建设和营运一座性能优越、适度冗余、高效节 能、规范管理的绿色计算机机房是机房运维设计使 用人员的希望和追求。 计算机机房从形式上可分为超级计算机机房、 数据机房（数据中心）及通用计算机机房。从功能 上可分为连续运行机房和在线式不间断运行机房。 各类计算机机房的设计、施工、管理各有其特点， 也具有计算机机房的共性。 本文主要阐述超级计算机机房设计原则，以 及目前国内外大型超级计算机机房设计与建设的案 例，解读超级计算机机房设计的指导思想及设计目 标。同时，将上海超级计算中心十年的管理体会， 与国内同行进行交流，抛砖引玉，期待各位专业人 士批评指正，旨在不断提高超级计算机机房基础设 施的管理水平，创建一个安全可靠、高效节能的绿 色机房。 1. 计算机机房设计目标和指导思想 功能决定形式是计算机机房设计者共同认同的 设计原则。由于各类计算机的功能差异，所需求的 机房环境也有很大差异。例如，超级计算机的特点 图1 超级计算中心供电示意图 是规模大、耗电高、装机密度高（目前）、单柜重 设计，主要包括200T超级计算机机房建筑工程、供 量大；而数据中心其特点是机房面积大、机柜数量 电系统、冷却系统、及其他相关设备工程。 多、单机耗电低、供电保障要求高。所以，在不同 根据“魔方”（曙光5000A）超级计算机供电 的机房设计中，都必须按照各自需求进行量身定制。 的重要性，供电等级为一级负荷，由市电提供二路 设计者在建设方的要求下，根据计算机机房的 10KV独立电源同时供电，100%冗余；当一路电源 特定要求,即机房供电形式、冷却方式、机房承重、 故障时，另一路能满足一、二级负荷的供电要求， 温度、湿度、洁净度、噪声、振动、静电、电磁干 一、二级负荷均设双电源自动切换供电。 扰等条件及其控制精度，在设计中遵循以下原则:安 机房的供电系统要求能保证对机房内的用电设 全性、可靠性、灵活性、扩展性、国际标准性及开 备供电在一般情况下都不会间断。新增“魔方”曙 放性、通讯容量需求控制、美观舒适、经济合理、 光5000A超级计算机和相关设备的电力供电系统由新 环保节能,以满足IT设备环境要求。 增供电系统提供，经ATS箱转换后的电源到机房配电 柜（含机房约50%插座供电），主机、网络设备、水 1.1供电系统设计 冷机柜内循环等由UPS装置供电。 UPS系统采用在线式，当市电供电电源断电后， 1.1.1 超级计算中心供电设计 UPS机组能够持续供电30分钟（电池配置按UPS全负 案例：上海超级计算中心200T超级计算机机房 荷15分钟计算）。 62 《高性能计算发展与应用》 2010年第二期 总第三十一期 使用自动切换装置ATS切换后提供的动力电 电，可长时间保障计算机房供电。UPS机组保障功 源,作为制冷设备、循环水泵、机房精密空调和通风 能，在断电时，设备切换时的供电支撑且保证电源 等设备供电。 质量。该系统结构复杂、设备繁琐、造价高且管理 使用自动切换装置ATS切换后提供的另一路电 成本高。 源，为机房区域的照明插座配电。 一级负荷中应急和疏散照明，采用集中式供电 1.1.3 国外IT机房供电设计 的EPS装置作