银联商务某公司生产网络故障应急预案.docxVIP

银联商务XX公司生产网络故障应急预案第1.1版银联商务网络室2012年8月30日版本控制信息版本日期拟稿和修改说明0.002012-5-23王涛初稿0.012012-5-28戴小飞增加部分细节0.022012-6-8王锋增加网控器故障演练0.032012-6-15王锋将内外网交换机故障合并为同类故障1.02012/8/7王锋加入故障现象和故障研判1.12012/8/30孙毅补充部分演练的故障现象和故障研判本文档中的所有内容为银联商务有限公司的机密和专属所有。未经银联商务有限公司的明确书面许可，任何组织或个人不得以任何目的、任何形式及任何手段复制或传播本文档部分或全部内容。目录1目的范围52演练目标53风险评估53.1分公司网络设备现状53.2风险可控64演练实施步骤84.1演练时间及参加人员84.1.1演练前期准备工作84.1.2实施时间84.1.3参与人员名单84.1.4演练完成后续工作94.2演练场景一：生产内网上联路由器故障94.2.1上联到总公司/当地银联网络的线路出现故障故障现象故障研判演练步骤预期分析结果分析应急处理134.2.2上联到总公司/当地银联网络的设备接口模块出现故障134.2.3上联到总公司/当地银联网络的设备出现故障故障现象故障研判演练步骤预期分析结果分析应急处理154.3演练场景二：交换机故障154.3.1主交换机设备故障故障现象故障研判演练步骤预期分析结果分析应急处理194.4演练场景三：隔离区防火墙故障204.4.1防火墙设备故障故障现象故障研判演练步骤预期分析结果分析应急处理234.4.2防火墙与内、外网交换机连接线路（端口）故障234.5演练场景四：生产外网下联路由器故障234.5.1外网路由器和商户间线路故障故障现象故障研判演练步骤预期分析结果分析应急处理254.5.2外网路由器设备故障254.6演练场景五：网控器切换254.6.1主上联卡故障演练步骤预期分析2结果分析2应急处理274.6.2主电源故障2演练步骤2预期分析2结果分析2应急处理295附件29总则本预案旨在针对分子公司生产网络出现故障时，能准确定位故障原因，针对故障原因采取有效措施，短时间内排除故障、恢复交易，最大限度地降低故障对生产造成的影响。适用范围本预案包括分子公司标准架构生产网的所有设备，主要包括：生产内网上联路由器故障；生产内、外网交换机故障；隔离区防火墙故障；生产外网下联路由器故障；网控器上联卡及电源故障。风险评估分子公司标准架构网络拓扑分子公司网络设备连接如下图：影响性评估如上图所示，分子公司标准架构的内网路由器、内网交换机、隔离区防火墙、外网交换机、网控器等均采用热备组成设级高可用，单台设备发生故障时，业务数据流将自动切换到备用设备，生产交易不会出现长时间中断。分子公司外网路由器用于与合作商户接入，当设备出现故障时，需要手动将商户接入线路切换至备用路由器，存在一定时间的生产交易中断。综上所述，银联商务分子公司标准脚骨生产网络发生单台设备故障时，可能会对生产系统交易造成影响，但风险总体是可控的。故障场景应急人员本预案所涉及的应急人员包括：岗位名称人员姓名运行监控岗系统支持岗网络支持岗应用支持岗场景一：生产内网上联路由器线路或设备故障上联到总公司/当地银联网络的线路出现故障故障现象监控岗位故障详细内容运行监控岗通过NETCOOL短信或者监控界面中的红色告警信息判断设备故障。系统监控岗网络监控岗通过远程telnet登陆分公司主路由器，telnet登录成功。通过ping，ping成功。通过在总公司下联路由器上ping直连接口，ping不成功。通过在总公司下联路由器上sh ip int brie 显示该分公司接口为down down。应用支持岗运行监控岗：NETCOOL告警信息如下如果出现红色告警，并显示线路类型：电信线路：总公司-XX分公司 无法ping通 线路编号：NA 报障电话：80082810000,则可能该路由器或线路已经出现故障。网络运行岗：检查路由器所有状态灯，显示有红色告警或熄灭。故障研判监控岗位故障研判预期结果运行监控岗查看总公司监控机netcool告警界面（00:16316/ibm/console） 发现红色告警，显示线路类型：电信线路：总公司-XX分公司 无法ping通 线路编号：NA 报障电话：80082810000网络支持岗通过远程telnet登陆故障路由器命令：telnet 11.XX.255.1通过ping路由器命令：ping 11.XX.255.1通过在总公司下联路由器上ping直连接口命令：ping 。通过在总公司下联路由器上查看接口状态命令：sh ip int Serial1/2/0:1telnet登录成功。ping成功。ping失败。显示Serial1/2/0:1 is down,