MSOFTX3000 事故快速恢复应急预案(CPCI) V1.0_for wind40.docVIP

MSOFTX3000事故快速恢复应急预案(CPCI) (客户版) HUAWEI Technologies CO. LTD. 目录 1 注意事项 3 2 应急预案场景和总体步骤 3 2.1 应用场景 3 2.2 故障恢复总体步骤 4 3 CPCI平台设备MSOFTX3000业务快速恢复三板斧 4 3.1 高危告警 4 3.2 高危操作 10 3.3 复位恢复 11 4 CPCI平台设备MSOFTX3000业务抢通方案 12 5 CPCI平台设备MSOFTX3000设备抢修方案 12 注意事项 本应急预案必须征求本网络客户同意后才可以使用。 应急预案场景和总体步骤 应用场景 应用场景： 本文档主要是用于在设备日常运行过程中，发生重大事故或紧急问题情况，没有定位的情况下，如何快速恢复。不适用于由于升级引发的紧急问题。 升级、打补丁后导致的问题需要通过回退解决，不在本文讨论范围内。 使用人员： 一线服务和客户 适用版本： CPCI V100R007C03/V100R008C02及以上版本 故障恢复总体步骤 CPCI平台设备MSOFTX3000业务快速恢复三板斧 高危告警 [MSOFTX3000]告警查询 步骤 流程步骤 执行时间 备注 1 查询告警列表 1 min 注：脚本中时间需要根据实际情况调整。 [MSOFTX3000]存在“ALM-1522 设备退出服务”告警 步骤 流程步骤 执行时间 备注 1 判断是否更改过FECFG配置以及SCTP参数配置 5min 在Server上确认是否修改过FECFG配置以及SCTP参数，命令如下（需要修改时间“年月日时分秒”）： LST CMDLOG: ST=20110601000000, ET=20110601020000, QM=KWDM, KWD=FECFG; LST CMDLOG: ST=20110601000000, ET=20110601020000, QM=KWDM, KWD=SCTPPARA; 如果修改过配置，并且与故障发生时间吻合，则需要确认修改参数是否正确； 如果确认修改错误，则重新修改正确。如果无法确认，则回退配置操作。完毕执行DSP MGW判断是否恢复； 注意： 回退的数据需要跟客户确认正确性。 更改这部分数据需要根据提示信息操作，可能会要求复位相应单板，参考下一步骤。 如果确认修改正确，再在告警台上查询修改FECFG和SCTPPARA之后时间里，WIFM、WBSG(WSGU)、WCCU(WCSU)、WMGC和WEAM单板是否都已经复位完毕；没有复位的单板，需要重新复位； 说明： 执行MOD FECFG命令后，修改除稳定性选项外的配置 ，要执行 FMT 命令并重启WIFM/WBSG(WSGU)/WCCU(WCSU)/WMGC/WEAM单板。 执行SET SCTPPARA命令后，需要复位WBSG单板 。 执行DSP MGW判断是否恢复，如果没有恢复继续下面步骤。 2 判断MGW侧是否更改过SCTP参数配置 2min 在MGW侧执行LST LOG查询是否修改过SCTPINIT配置及IPIF配置（修改时间，SD表示开始日期，ST表示开始时间，ED表示结束日期，ET表示结束时间）： LST LOG: LTP=OPER, SD ST=000000, ED ET=010000, CN=SET SCTPINIT; LST LOG: LTP=OPER, SD ST=000000, ED ET=010000, CN=MOD IPIF; 如果有修改，则恢复原先的配置； 在MSOFTX3000侧执行DSP MGW判断是否恢复，如果没有恢复继续下面步骤。 3 执行ACT MGW激活网关 1min 使用ACT MGW命令激活网关； 执行DSP MGW判断是否恢复，如果没有恢复继续下面步骤。 4 在MGW侧激活虚拟媒体网关 1min 在MGW侧执行ACT VMGW激活虚拟媒体网关。 5 确认H248链路是否正常 2min 查询H248链路状态，确认告警中退服MGW的H248链路是否全部故障： DSP H248LNK: MGWNAME=xxx; 如果存在至少一条正常的H248链路，则请跳出此告警的处理，跳到执行[MSC Server]存在“ALM-4662 Q922链路CRC校验失败比例高”或 “ALM-2069 模块间通信故障”告警 6 检查IP承载网是否正常 5 min MSOFTX3000侧执行Ping操作（改变“次数”为100；改变“数据大小（字节）”的数值为64,500,1400进行三次操作），对于SCTP多归属链路，两个路径都需要进行； 如果上述Ping操作显示丢包率大于20%，则可以