信息机房UPS电源故障应急预案.docxVIP

信息机房UPS电源故障应急预案

XX企业应对信息机房UPS电源故障的应急预案

一、风险评估

1.诱因识别

1.1设备老化：UPS主机使用年限超过5年，电容、风扇、IGBT模块进入故障高发期。

1.2电池劣化：阀控铅酸电池在25℃环境下浮充3年后容量衰减至80%以下，高温或低温加速硫化。

1.3输入电源异常：市电闪断、谐波超标、中性线漂移，导致UPS频繁切换，冲击功率器件。

1.4负载突变：机房新增刀片服务器或高密度存储，瞬间超载110%以上，触发UPS自我保护关机。

1.5人为误操作：检修时错断电池开关、误改并机逻辑、维护旁路未按序切换。

1.6环境因素：空调失效引起持续35℃以上高温，电池舱温度每升高10℃，寿命减半；冷凝水渗入UPS内部造成短路。

1.7外部灾害：楼顶雷击、配电室火灾、水管爆裂，导致UPS配电柜进水或绝缘击穿。

2.发生等级

Ⅰ级（灾难）：双总线UPS同时失效，机房全部失电，业务系统宕机，预计恢复时间＞4h，直接经济损失≥100万元。

Ⅱ级（重大）：单总线UPS失效，另一路可支撑，但无冗余，预计恢复时间1–4h，损失30–100万元。

Ⅲ级（一般）：单台UPS故障，系统可自动切换至旁路或电池，预计恢复时间＜1h，损失＜30万元。

Ⅳ级（轻微）：UPS发出报警，性能下降但可带载，无需立即停机，损失＜5万元。

二、职责分工

1.应急指挥组

组长：信息中心主任（A角：王勇B角：李婧

职责：启动预案、对外信息发布、资源调配、向集团COO汇报。

2.技术处置组

UPS专业工程师：赵勇（A角）、孙佳（B角），持有APC、维谛原厂高级认证，负责故障定位、维修、并机逻辑调整。

电池工程师：陈勇（A角）、周婷（B角），持有电池内阻测试仪操作证，负责电池组开盖、更换、回收。

电气工程师：郑凯（A角）、胡斌（B角），持有高压操作证，负责市电切换、旁路配电、母排绝缘检测。

网络工程师：冯亮、罗倩，负责服务器有序关机、网络设备掉电保护，确保DNS、DHCP、AD核心服务最后离线。

3.动力保障组

空调主管：韩冰，负责确保电池间温度≤25℃，UPS进风温度≤30℃；失电期间启动两台50kW行级空调备机。

柴油发电房：徐建，负责800kW柴油发电机组15min内并网，储油量≥1000L，每月空载测试15min。

4.安全与后勤组

安保队长：张强，负责机房门禁、人员疏散、电梯迫降、气体灭火系统手动启动。

行政采购：林珊，负责30min内完成应急物料合同加急签订，包括100Ah电池64节、IGBT模块6只、并机板2块。

财务总监：吴昊，负责2h内完成50万元以下应急付款审批。

5.业务连续性组

ERP负责人：田丽，负责生产系统5min内切换至云端灾备实例。

客服中心经理：何琴，负责对外公告、客户答疑、工单延迟赔付方案。

三、分阶段处置流程

阶段0：日常监测（T24h至T0）

资源清单：SNMP网管平台、UPS原厂软件、Fluke435电能质量仪、电池内阻仪、红外热像仪。

责任人：值班工程师（当日轮值表）。

操作步骤：

0.1每2h自动轮询UPS状态，记录输入电压、负载率、电池剩余时间、温度。

0.2每日08:30与20:30人工核对电池房温湿度，若发现≥28℃，立即启动备用空调并短信通知空调主管。

0.3每周一09:00测量10%电池内阻，偏离基线30%以上列入更换清单。

阶段1：故障预警（T0至T0+5min）

触发条件：UPS发出“电池断路”“逆变器过温”“风扇故障”“负载105%”任一报警。

责任人：值班工程师。

操作步骤：

1.1值班工程师30s内确认报警真实性，通过摄像头远程查看UPS柜声光报警灯。

1.2若确认属实，1min内电话通知技术处置组A角赵勇，同时在大屏发布“Ⅲ级预警”红色字幕。

1.3值班工程师立即调取UPS历史曲线，判断是否为瞬时过载，若过载持续＞30s，执行减载：按优先级先关闭测试区非生产服务器。

阶段2：故障确认与定级（T0+5min至T0+15min）

责任人：技术处置组组长赵勇。

操作步骤：

2.1赵勇到场后佩戴1000V绝缘手套