09人为故障研讨.pptVIP

TA000303 人为故障研讨 1.1 引入 针对目前网上运行的华为光网络设备在日常运行过程中，由于维护人员在进行维护操作时违反日常维护建议或操作规范而引发的重大事故 侧重于以下几方面： 规范性： 安全性： 事故处理方面： 学习目标 了解发生人为故障的常见原因 学习、研讨具体人为故障案例 掌握如何避免人为故障 课程内容 第一章 人为故障定义及危害 人为故障的定义 人为故障的危害 人为故障的定义 由于人为因素引起的业务中断类设备故障 人为故障的危害 突发性：对故障的处理往往准备不及 责任性：需追究当事人责任 隐蔽性：给定位故障带来许多障碍 问题 如何才能避免人为故障的发生呢？ 解答 提高技术水平 增加对所维护设备的了解 操作之前三思而行 增加责任心 加强日常维护制度的规范性 ……… 课程内容 参考资料 光网络设备网上人为重大事故分析 故障排除案例集锦 光网络维护速查手册 第二章 典型人为故障案例学习 光缆错连导致的全网业务中断 【系统概述】 某用户使用华为公司20多套OptiX155/622设备组成一通道保护环，集中型业务。在工程中主站一侧最后一段光缆未好，全网处于倒换状态，支路显示PS告警，业务正常。 【故障现象】 某天下午，光缆施工完毕，将最后一段光路打通，业务正常。10分钟后，全网业务中断。 光缆错连导致的全网业务中断 【故障分析及排除】 将该段尾纤拔掉，业务立刻恢复正常。可见为主用通道故障，再次检查配置，无问题；怀疑交叉板故障，因网上有业务，不便处理；后想到用户方面原因，可能为最后一段光缆接错，让用户仔细检查，确实为光缆接错。 光缆错连导致的全网业务中断 【事故原因】 通道环原来处于倒换状态，业务正常。当最后一段光缆连好，因光缆连错且该段光缆恰为我司另一个环的光缆，含有正常光信号，光板无法分辨是否为正确的光信号，RLOS告警消失，不再下插AIS，支路检测不到TU-AIS，根据通道倒换原理，10分钟后选收主用通道。但因为此时光缆接错，主用通道中无正常的业务信号，故实际业务中断且网上无任何告警。 光缆错连导致的全网业务中断 【事故总结】 光缆接错是用户在升级扩容和熔接光缆时最常见问题，其原因一般多为连接光缆时太随意或光缆没有按照维护要求粘贴标签；这类事故发生后通常会造成大面积的业务中断，酿成重大事故。这里从维护的角度，向维护人员说明讲解一下这类故障的现象与常用定位故障的方法。 光缆错连导致的全网业务中断 当此类事故发生后，一般表现的现象； a、组网为通道保护环： 如果光纤自环或连接错误，不会有什么异常告警，但在光缆连接正常十分钟后业务会中断；因为此时断纤西向的站点会默认为主环光路恢复正常，而把备环的业务倒回倒主环，导致业务中断。 b、组网为复用段环： 如果光纤自环或连接错误，光板上的R-LOS告警消失，但全网仍处于复用段保护倒换状态下，业务没有中断；由于光纤连接错导致断纤两端的网元无法从短径正常收发K1K2字节，因此复用段保护环始终处于保护倒换状态下，无法恢复。 光缆错连导致的全网业务中断 预防措施：如何定位光缆是否连接错误 a、用网管检查ECC通道是否正常，判断光缆是否接错：正常情况下，ECC路由应该走最短路径，并且其每个DCC通道的收发字节应在同一数量级； b、用网管向光板下插MS-RDI告警，通过查询下游站对应光板的告警信息来判断光缆连接是否正确。 c、用网管软件更改线路板的J1字节，通过查询下游站的告警信息是否上报HP-TIM告警来判断光缆连接是否正确。（由于HP-TIM告警可能会下插AIS，此方法不适用于OptiX155/622设备的老子架，在OptiX系列设备与其他厂家设备进行对接时也不推荐使用此方法） 未成环由于复用段协议启动使业务中断 【系统概述】 某工程由OptiX 2500+设备组成STM-16双向复用段保护环，1号站接网管，组网如图所示。由于5号站和6号站之间的光缆可能很长时间不能到位，在开局时按复用段配置，但停止了复用段协议。各个站到1号站都有业务。 【故障现象】 某日，维护人员在网管上增加3号站到1号站之间的业务，对1、2、3号站的配置进行了修改。配置修改完成后，交换机房反映4、5、6、7号站的业务出现了中断。 未成环由于复用段协议启动使业务中断 【故障分析及排除】 查询告警，发现1号站对应于4、5、6、7号站的业务出现了TU-AIS告警，而且1、2、3号站出现了PS告警。 检查复用段状态，发现1号站为“倒换西向”、2号站为“穿通”、3号站为“倒换东向”。将1、2、3号站的复用段协议停止后，业务恢复正常。 未成环由于复用段协议启动使业务中断 【事故原因】 由于修改配置导致了复用段协议的异常启动，影响了业务。 修改配置主机要进行校验，会使复用段协议自动重新启动。如，1号