某智算中心冷板式液冷监控系统应用研究 .pdfVIP

某智算中心冷板式液冷监控系统应用研究

伴随人工智能技术的出现，算力基础设施的建设与日俱增。算力

提升必然伴随芯片能耗的增加，传统的风冷冷却方式已经难以满足高

密度和高性能服务器的散热需求。在“双碳”宏观形势下，数据中心

作为耗能大户，国家及政府部门对数据中心PUE监管越发严格。液冷

技术作为一种高效、节能、保的散热方式，通过冷却液体与服务器

直接进行热交换，提高换热效率，能够有效降低PUE,逐渐成为新形

势下业界主流的制冷解决方案。本文结合某智算中心项目，针对冷板

式液冷监控系统的设计及应用展开讨论，最终保障液冷系统稳定高效

运行。

1某智算中心冷板式冷源系统概况

某智算中心冷板式液冷散热方式分为两部分。一部分是服务器芯片、

内存等高发热元件的热量通过冷板间接传递给液体进行散热；另一部

分是硬盘、电源、接口卡等低发热元件仍通过风冷散热，即通过高压

冷水机组制冷再由末端空调通过风冷形式进行热量交换。根据工艺专

业条件，冷板式液冷机柜65%〜70%的热量由机柜内的冷板带走,30%〜

35%的热量由冷冻水型列间空调带走。

某智算中心是在原水冷系统基础上进行改建，在前期机电配套工程中,

1层制冷站内建设4套10kV高压离心式冷水机组，配套板式换热器、

开式逆流冷却塔和冷冻冷却水泵等，并建设有1套PLC控制架构的冷

源群控系统。本期新建3套液冷冷源系统，2用1备运行。单组换热

量6000kW,包括水处理装置、加药装置、循水泵和闭式冷却塔等

设备。液冷系统采用一次泵变流量系统，循水泵采用变频调速控制,

空调末端水管采用电动二通阀控制流量，冷却水系统采用闭式循系

统。为提高系统的安全性，冷却水干管均设置成路，任何一路冷水

或设备故障，均不影响关键负荷100%运行，并保证在线维护的需要。

2液冷监控系统设计

根据暖通工艺设计，冷板式液冷系统分为一次侧外循（冷源端）与

二次侧内循（热源端）两个分离的子系统。这两个子系统通过板式

换热器进行高效换热，实现热量的转移，如图1所示。液冷服务器通

过管道与冷量分配单元CDU的二次侧连接，用以转移液冷服务器的热

量，此为二次侧循。冷量分配单元CDU的一次侧通过管道与冷却塔

连接，用以对外散热，此为一次侧循。液冷监控系统以CDU为界,

将冷板式液冷系统划分为冷源自控系统和动监控系统两部分。冷源

自控系统主要监控一次侧循设备；动监控系统主要监控二次侧循

设备CDU以及机房内温湿度、漏水、配电柜、空调等设备。

图1闭式冷塔+集中式CDU并联制冷架构示意图

2.1冷源自控系统设计

冷源自控系统主要负责一次侧循设备的监控，包括闭式冷塔、

冷却水循泵、定压补水装置、加药装置、水处理装置、中转补水装

置、混合水箱、乙二醇溶液补水箱、电动阀、传感器及电伴热等设备

组成，如图2所示。冷源自控系统采用PLC架构，系统配置主备CPU

控制器与水冷冷源群控系统的CPU控制器分开设置，独立运行，互不

干扰。系统平台、主备服务器、双机热备软件与前期水冷冷源群控系

统共用，方便后期维护人员统一管理。

图2液冷一次侧循系统

冷源自控系统能够实现能量积算、温度控制、机组及配套组件的自动

投入或退出、机组的均衡运行，实现液冷冷源系统智能化运行，达到

可靠、经济运行的目的。冷却塔配置负荷调节、运行状态、故障显示

与报警、完备的控制及自保护装置，可实现机组空调出水温度的控制

和调节能量等功能，机组配备标准通信接口。冷却水泵和闭式冷却塔

进行联锁控制，制冷系统开启时先开启相对应的冷却水泵和冷却塔进

水管上的电动蝶阀、冷却水循泵、冷却塔风机，停机顺序与上述相

反。

2.2液冷机房动监控系统设计

液冷机房动监控系统主要负责对数据中心外部的液冷设备进

行实时监测和告警，包括CDU监控和机柜管理系统等部件。CDU是连

接一次侧和二次侧的关键设备，需要监测其进出水温度、压力和流量

等参数；机柜管理系统主要负责监控服务器内CPU等高热部件上的冷

板，监测其温度、压力和泄漏情况；机柜管理系统同时负责监控服务

器电源模块，监测其电压、电流和功率因数等数据。2.2.1CDU监测