DCS与ESD之间通讯故障导致气化炉停车原因分析及处理.docVIP

DCS与ESD之间通讯故障导致气化炉停车原因分析及处理 　　【摘 要】随着科技的发展，自动控制系统推动了工业发展。时至今日，大型化工生产对自动控制系统依赖程度达到前所未有的高度。一旦控制系统发生故障将会严重影响系统安全。本文通过一次控制系统故障，详细介绍了事故发生的原因，问题排查的过程以及采取的措施，提高了自动控制系统稳定性。 　　【关键词】ESD；DCS；自动控制系统 　　1 引言 　　某公司德士古水煤浆加压气化控制系统采用的DCS（Distributed Control System）为ABB的industrial分散控制系统。该系统采用全局数据库编程技术以实现全局一体化编程。紧急停车系统ESD（Emergency Shutdown Device）系统为德国HIMA公司的大型PESHS系统。在运行过程中因硬件故障等原因多次发生故障，严重时造成全系统停车。下文记录了一次因DCS于ESD之间通讯中断造成气化炉停车的事故经过、处理过程以及所采取的措施。 　　2 事故经过及故障排查过程 　　2013年11月29日8时20分A#气化炉因“氧煤比高高”联锁触发跳车。跳车后DCS流程画面仍然显示A#气化炉系统处于开车运行状态。仪表值班人员立即对控制系统进行检查，发现DCS系统和ESD系统之间的通讯出现严重的迟滞。在查找通讯迟滞问题过程中，B#气化炉于11月29日08：25跳车，跳车信息ESD系统SOE记录为no communication记录。公司领导和仪表车间相关负责人到现场展开全面检查，发现DCS和ESD之间的通讯状态为：A#气化炉与ESD的数据通讯完全中断，B#和C#气化炉与ESD的数据通讯延时时间约为5分钟（正常时间为5秒左右）。 　　事故发生后，仪表车间相关负责人对所有硬件和软件记录信息仔细检查和分析，并且采取了以下措施进行问题排查： 　　1）对DCS系统中的专用通讯控制器AC9进行冗余切换，排查是否是因为主控制器通讯故障，结果显示两冗余控制器不存在硬件故障，通讯故障未消除； 　　2）对所有的通讯接口的端子进行重新压接、紧固，通讯故障未消除； 　　3）对AC9控制器进行断电，重新上电自检启动，通讯故障未消除； 　　4）对AC9程序重新进行了整站下载，故障未消除； 　　5）对ESD系统每对控制器均进行了掉电后重新上电处理，通讯故障未消除； 　　6）对ESD系统每对控制器均进行了程序的重新整站下载，通讯故障未消除； 　　7）因DCS诊断软件显示AC9控制器通讯负荷为100%，严重超标，因此将AC9控制器下的其他通讯负载（气化炉表面热偶通讯、气化质谱分析仪通讯）全部断开，只保留ESD系统的通讯，通讯故障未消除； 　　8）从DCS的AC9控制器至ESD系统重新敷设一根MODBUS电缆，脱开原通讯电缆，对单套系统之间进行独立通讯，通讯故障未消除； 　　9）将ESD系统至DCS AC9的通讯接头更换为新的通讯接口，通讯故障未消除。 　　10）借鉴兄弟单位处理此问题的经验，将CPU掉电并拆除CPU电池，彻底清除FLASH存储，并重新进行程序的整站下载，通讯故障仍然未消除。 　　11月29日ABB和HIMA的工程师对各自系统进行内部通讯测试，DCS工程师通过MODBUS通讯测试专用软件对DCS的内部通讯数据进行发送和接收测试，测试表明AC9控制器自身通讯状态正常；ESD工程师通过MODBUS通讯测试专用软件对ESD系统每个CPU进行通讯测试时发现：（1）A套ESD系统两个冗余的CPU上的MODBUS接口通讯故障，无法响应发送和接收数据的请求；（2）B套ESD系统两个冗余的CPU上的MODBUS接口通讯正常，完全响应发送和接收数据的请求；（3）C套ESD系统两个冗余的CPU其中一个的MODBUS接口通讯故障，无法响应发送和接收数据的请求；（4）D套ESD系统两个冗余的CPU上的MODBUS接口通讯正常，完全响应发送和接收数据的请求。随后，在ESD系统上将MODBUS接口故障的CPU脱开，测试至DCS通讯，通讯恢复正常。经比对测试结果，最终确定此次通讯故障的根本原因为：在ESD至DCS的通讯链路中出现了三个故障点，造成了数据通路中涌现出大量故障诊断数据，并重复诊断，这些数据极大地占用了数据通讯通路，引起了数据拥堵，系统之间正常的数据交换变得非常迟滞，出现了通讯等待、延时的情况。 　　3 事故原因分析 　　1） ESD系统通讯模块故障，引起ESD至DCS之间的通讯故障，造成系统之间的数据不能正常传输，导致B#气化炉跳车，引起后系统停车，是发生事故的直接原因。 　　2）系统停车大修期间未对DCS和ESD系统的通讯状态和接口、线路、模块进行检测，点检不全面、检查不彻底，未要求厂家对DCS系统与ESD系统之间的