黑龙江移动-铁通网络应急预案.docVIP

TIME \@ yyyy-M-d 2014-10-13 第PAGE1页, 共 NUMPAGES \* Arabic 11页 黑龙江移动-铁通网络应急预案 鸡西 应急日常准备 网络基本信息准备： 工具和仪表准备： 工具名称 用途 光功率计 用于测量光功率。 光纤跳线 用于替换故障尾纤。 光纤绑扎带 用于捆扎替换后的故障尾纤。 网线 用于连接网元或局域网的网线。 光谱分析仪 用于查看光线路的光谱。 万用表 用于测量各种电气参数。 防静电腕带 防止人体静电损坏敏感元器件。 防静电包装袋 保护需要防静电的部件。 防静电服 防止人体静电损坏敏感元器件。 十字螺丝刀 用于拆装设备螺丝。 标签纸 用于标示设备或者线缆。 SDH、ETH业务分析仪 用于测量业务信号。 应急恢复 总体原则：以业务快速恢复为目标，优先抢通业务，做好分工和解决方案的沟通，争取抢通和抢修并行。 当故障业务条数小于等于2条时,如初步判断不能短期解决,优先将重要业务倒换到保护波道。 事故信息收集（10分钟） 第一时间关键信息收集 操作人员 操作步骤 具体动作 备注 网管人员 故障基本信息收集 故障发生时间：年/月/日 时:分:秒 影响业务信息：波数，业务级别（2.5G，10G，40G，100G)和承载的业务类型(大客户专线，移动回传)及对接设备类型（可选）。 故障前外部操作或环境变化：如掉电，机房温度变化，光缆割接，网络拓扑调整（增删节点，网络改造），客户侧业务割接调整等； 故障后已做操作及结果：网管侧操作：业务配置，人工保护倒换，复位单板，环回等；现场操作：拔插光纤/电缆，物理环回，拔插单板，更换单板，网元上下电；处理结果：中断业务部分恢复，中断业务更多，网元返回失败，单板不开工；等等 网管人员 网络基本信息收集 网络拓扑：节点数、保护类型(ODUk SNCP，OLP光线路1+1，客户侧1+1，ODUk Spring，ERPS，板内1+1，无保护)、网络层次(骨干，汇聚，接入)、拓扑类型(链，环，环相切，环相交，环带链) 设备信息及运行情况: 设备类型，网元版本、网元状态 网管人员 查询告警和性能信息 根据承载业务中断的具体时间，查询对应时间段是否存在关键告警或异常状态 (如:光纤中断RLOS、单板复位、网元脱管、保护倒换告警、环回告警、安装态告警) 在网管上先同步告警，然后查询当前和历史告警以及当前及历史15m性能。 把设备、单板、线路的告警与业务中断的时间进行一致性确认。 建议检查告警屏蔽状态和通道非介入监视状态，确保告警正常上报。 故障前后主通道光功率值(光放大板/OSC板)；（通过24H历史性能查询历史值） 网管人员 查询操作日志 根据承载业务中断的具体时间,查询该时间段的关键操作日志。（关键步骤为：配置业务、复位、环回、优化、倒换等操作） 网管人员 初步判断 根据告警和操作日志是否能初步准确定位到关键设备和保护子网。采取相应预案。 网管人员 求助烽火工程师 请第一时间电话烽火工程师。有条件的可以取得客户授权的情况下远程接入； 网管人员 查询业务中断共同路由 如果是多波中断，查询所有中断波长所经过的路径，确认波长经过的共同网元节点。 网管人员 通过环回功能定位到单站 选取一条中断的路径，点击维护-环回，进入环回界面。采用二分法，从源端到宿端逐步环回。确认影响业务中断具体设备，再根据该设备的具体异常，采取预案。 避免在情况不明的情况下盲目操作, 导致问题扩大化。 处理过程中一定要作好故障记录，保存好故障的原始数据。 分析定界：（5分钟） 根据上述采集的信息，判断是否波分网络的问题： 信息分析定界 步骤 操作人员 判断和定位 时间花费 1 网管人员 中断的业务只在波分系统上有共同的故障路由，则需要先排除波分侧故障； 5分钟 2 网管人员 波分设备OTU单板的波分侧存在 OTN_LOF/OTN_LOS/OTUk_SM_BIP8_SD/OTUk_SM_BDI/OTUk_SM_BEI ODUk_PM_AIS /ODUk_PM_BDI等告警，确认为波分侧问题； 3 网管人员 中断业务经过的共同路由有明确的设备、单板等硬件故障告警（如：COMMUN_FAIL /TEMP_OVER等），判断为波分设备问题，并马上启动硬件备件响应； 4 网管人员 波分设备OTU单板客户侧端口存在R_LOS、R_LOF等告警，则需要先排查客户侧光口和对接设备之间的故障。 定位恢复：（50分钟） 场景一：单波业务中断 此处指无保护场景 定位恢复步骤 场景介绍 A/B/C/D/E五个站点组成一个96波波分环（左上图），各站信号流图见右图。 每个波道在中间站点均OMU48ODU48尾纤直接穿通。 现发现AD之间的192.1THZ单波道中断。有相关告警（OTN_LOS/OTN_LOF/O