1、调控中心自动化班——网卡非冗余配置问题处理经验分享.pptx

网卡非冗余配置问题处理经验分享 电力调度控制中心 调度自动化班 事件概述 01 缺陷分析 02 解决措施 03 经验分享 04 目录 1 2016年12月8日 事件概述 根据调度工作站搬迁工作安排，自动化人员在一楼监控室机房对搬迁设备进行就地重启测试 WHEN WHO 事件概述 WHERE WHAT 2016年12月8日 一楼监控室机房 调度自动化系统 集控交换机1上设备接入端口指示灯不亮 主干网交换机1 主干网交换机2 调度交换机1 调度交换机2 集控交换机1 集控交换机2 Jk4 Jk5 Jk6 pas1 pas2 pas3 com1 manit1 manit2 yj1 dd1 事件概述 集控交换机1设备接入端口指示灯不亮说明三台调度工作站jk4、jk5、jk6未正常接入集控交换机1，集控交换机网络未构成冗余配置。 dd2 dd3 …… …… …… 主干网交换机1 主干网交换机2 集控交换机1 集控交换机2 Jk4 Jk5 Jk6 事件概述---- 危害 …… …… 调度交换机1 调度交换机2 pas1 pas2 pas3 yj1 dd1 dd2 dd3 …… com1 manit1 manit2 在交换机网络非冗余配置下，工作站只有一条可运行的网路。若在运行的网路出现了故障，工作站不能切换到另一网路运行，将会导致jk4、jk5、jk6工作站业务全部中断。 链路失效 失去监盘，危害电网运行稳定运行！ 2 工作站运行状态问题 缺陷分析 自动化班组对该问题进行了分析和研讨 主干网交换机1 主干网交换机2 调度交换机1 调度交换机2 集控交换机1 集控交换机2 Jk4 Jk5 Jk6 pas1 pas2 pas3 com1 manit1 manit2 yj1 dd1 缺陷分析 检查交换机状态，通过笔记本接入测试，发现端口指示灯正常，排除交换机故障。 dd2 dd3 …… …… …… 主干网交换机1 主干网交换机2 集控交换机1 集控交换机2 缺陷分析 …… …… 调度交换机1 调度交换机2 pas1 pas2 pas3 yj1 dd1 dd2 dd3 …… com1 manit1 manit2 检查服务器状态，包括硬件检查、系统配置及应用情况等。 通过检测，jk4、jk5、jk6工作站均处于单网卡运行状态，而正常情况下，工作站应具备双网卡冗余配置。通过sam进程检查，我们发现其中一网卡没有配置IP地址，工作站未双网卡绑定。 jk4 jk5 jk6 缺陷分析 3 HOW 解决措施 采用PDCA，自动化班针对此问题进行整改 主干网交换机1 主干网交换机2 集控交换机1 集控交换机2 Jk4 Jk5 Jk6 解决措施 ---- 排查 该次问题发现区域 需要排查区域 …… 调度交换机1 调度交换机2 pas1 pas2 pas3 yj1 dd1 dd2 dd3 …… com1 manit1 manit2 com1、dm1、maint2、pas3四台工作站也存在单网卡运行的问题 排查发现 扩大检查范围 除接入集控交换机1上的三台工作站，员对班组成调度自动化主站网络上共计51台全部服务器及工作站进行了排查。 解决措施 ---- 排查 将配置排查出的工作站数据备份一次 解决措施 ---- 整改 给网卡配置IP地址，并双网卡绑定 测试双网卡是否处在正常工作状态 4 SHARE 经验分享 分析了其中的暴露问题，并补充巩固措施 巡检表单仅关注设备总体运行情况，精益化管理水平需提高。 对网卡绑定认识不足，只重点关注了系统节点运行情况，对新接入或重装操作系统的设备网卡等细节关注度不高 缺乏对自动化设备的配置内容以及部件状态的监视手段。 经验分享 ---- 暴露问题 提升自动化员专业素质 管理 监视 巡检 破冰 经验分享 ---- 巩固措施 修改巡检表单 将工作站及服务器网卡工作状态检查情况，固化到每日巡检表单 （省公司标准作业表单本地化修编，增加此项内容） 展开自动化员专业水平培训，提高全员的警惕性，提高风险辨析能力。 管理 监视 巡检 破冰 经验分享 ---- 巩固措施 接入流程精益化——《新设备接入配置指引》 新增设备（包含工作站、服务器、交换机等）配置指引，将接入流程标准化，精细化。 设备主人制 学习宣贯设备主人制管理理念，初步落实设备责任人并开始试行，逐步达到人人参与，个个关心的目标。 监视 破冰 管理 巡检 经验分享 ---- 巩固措施 电力二次综合管控平台 二次监管平台实用化建设，采集所有设备运行状态（包括网卡、电源、CPU等），并推送告警。 破冰 巡检 监视 管理 经验分享 ---- 巩固措施 破冰行动 配合班组破冰行动，改掉陋习，养成巡检、应对、消缺的好习