华为PTN ETH业务故障处理.ppt

2013-4-13 PTN ETH业务故障处理 PTN LMT HUAWEI TECHNOLOGIES CO. LTD. HUAWEI 目录 原因篇 故障定位流程篇 典型案例分析篇 总结篇 附录 HUAWEI TECHNOLOGIES CO. LTD Huawei Confidential age 2 HUAWE 原因篇 ETH业务不通/中断原因主要包括以下几种,我们的定位工作也就主 要围绕这几个方面展开 配置错误 硬件故障/设备异常 链路问题/报文丢失 对接设备异常/配合问题 软件缺陷 HUAWEI TECHNOLOGIES CO. LTD Huawei Confidential HUAWE 原因篇——业务配置错误 配置错误可能原因 1:对接端口的工作模式配置不一致。 2:对接端口Tag属性配置不一致。 3:网络侧PwW/ Tunnel参数配置错误。 4:业务被误删除,网管与设备上配置不一致。 5:对ELa业务来说,水平分割组,静态Mac地址表的配置也比较关键, 以下故障场景优先排查配置错误 (1)创建后业务不通 (2)修改配置后业务中断 (3)新增业务后其他业务受到影响 HUAWEI TECHNOLOGIES CO. LTD Huawei Confidential HUAWE 原因篇—硬件故障/设备异常 硬件连接错误: 原因可能是单板未插紧、物理板和逻辑板不匹配、光纤/网线损坏或连接错 误等等 硬件故障 原因可能是单板元器件/芯片损坏、单板元器件寿命到期等等,关键器件 会有相应告警上报,详细说明如下 HUAWEI TECHNOLOGIES CO. LTD Huawei Confidential age 5 HUAWE 原因篇—硬件故障/设备异常(续) 件错误 现异常,此种情况只能 AAB上 FPA状异篇 FPGA跑飞了·此 硬复烷单板,重新初始 FPGA+ EI口vER 单板工作温度越 际温度耙过了单板 正業工作的范围,有可 能影响到单根上器件 正常工作,果对业 务处理芯片有影响可 以下故障场景优先排查硬件、设备异常 (1)业务不通或出现丢包时,查询告警存在硬件设备级别告警 (2)业务更改物理线路后,业务出现误码或不通; HUAWEI TECHNOLOGIES CO. LTD Huawei Confidential age 6 HUAWE 原因篇—链路问题/报文丢失 接入侧链路故障 原因可能是接入设备的物理链路中断或质量有问题,导致报文被修改或无法传入PTN 设备,对于RJ45接口,可以查询是否存在ETHL0S, ETH LINK D0W告警来进行排查, 对于光口可以查ETHL0S, ETH LINK D0WN, IN PWR ABN告警来进行排查 PW/Tunne故障 原因可能是PW/ Tunnel down、业务流经的物理链路中断等等 报文拥塞 原因可能是带宽配置过小、同优先级的报文流量过大导致丢包,或网络上流经此端口 的流量超过端口实际的物理流量的范围而丢包等等 存在物理或逻辑上环路故障(仅针对Elan): 原因可能是网络组网就存在物理环路,或水平分组配置不合理引起逻辑链路上的环 路或报文被环回的情况等等 HUAWEI TECHNOLOGIES CO. LTD Huawei Confidential HUAWE 原因篇—对接设备异常/配合问题 对接设备异常 原因可能是对接设备将报文修改了,我们接到错误报文就直接丢弃,或 者对接设备异常导致无法发送数据到对端等 配合问题: 原因可能是业务流经的设备过多、网络流量拥塞、带宽分配过小、中间 网络设备调度算法有缺陷等等导致网终时延,抖动过大,从而影响业务的 传输性能 以下故障场景优先排查对端设备异常 (1)我们设备上没有异常告警且配置正确,查询端口性计数无收情况 2)业务传输不稳定,会出现中断后又恢复的情况 (3)业务原来是正常,我们设备配置没有更改过,出现的业务不通问题。 HUAWEI TECHNOLOGIES CO. LTD Huawei Confidential age HUAWE 原因篇—软件缺陷 软件缺陷主要有以下几种情况: (1)配置丢失 (2)单板或网元异常复位; (3)软件不同模块的配置参数不一致 (4)软件内部处理流程错误 (5)告警误报 需要研发人员提供相关命令才能确定。 HUAWEI TECHNOLOGIES CO. LTD Huawei Confidential age 9 HUAWE 故障定位流程篇 通用方法介绍 通用流程介绍 (1)硬件故障定位流程 (2) Tunnel/pw故障定位流程 3)接入侧故障定位流程 (4)ELAN业务层面定位流程 (5)其它故障定位流程 HUAWEI TECHNOLOGIES CO. LTD Hua