某集团LIMS服务器访问ERP系统故障分析解决方案..docx

某集团LIMS服务器访问ERP系统故障分析故障描述故障现象LIMS从2008.11.1正式接入网络，开始对ERP系统进行访问。同时，集团内部还有很多用户对ERP系统进行访问。从2009.1.5日开始，ERP系统时常出现访问速度慢、业务瘫痪、甚至ERP系统宕机的情况。集团网络管理人员分析后，发现当LIMS系统断开与ERP系统的链路时，ERP系统一切正常。继续分析后发现，在LIMS系统与ERP链路相连的时候，如果LIMS系统使用手动模式时，ERP工作正常；但使用自动模式（每5分钟一次查询），即会出现故障导致ERP系统不能正常工作。备注：LIMS的工作模式有自动和手动两种。LIMS系统开发商表示，自动和手动工作模式，在工作时没有任何区别。对LIMS系统进行了彻底的安全检查、病毒木马查杀，但未发现任何异常。对ERP系统进行了彻底的检查，但一切正常。网络拓扑LIMS访问ERP系统的拓扑如图1所示。从图中可知，LIMS访问ERP的链路非常简单，具体是LIMS - 接入交换机 - 核心C6509E - 数据中心C6509E - ERP系统。（图1 某集团LIMS访问ERP原始简易拓扑图）具体分析捕获数据包　通过上述分析，明确了该故障属于应用故障，而不是网络故障。由于已对该应用的两端（LIMS和ERP）进行过彻底检查，故在此情况下，我们捕获并分析了该应用的原始数据包。捕获数据包的位置是在LIMS服务器和接入交换机之间，串接了一个HUB，然后将捕获数据包的笔记本接入到HUB上，如图2所示。（图2 捕获LIMS访问ERP系统的原始数据包拓扑图）从捕获的数据包可知，不管是手动模式还是自动模式，LIMS对ERP进行1次访问，均会创建3个连接，其中2个是LIMS从ERP下载数据，第3个是LIMS上传数据到ERP，第3个与第2个连接之间相隔约105s（此时间应该是LIMS检查本地是否存在更新）。自动模式下首先进行的是LIMS从ERP下载数据，然后是LIMS上传数据到ERP。手动模式下可自由选择顺序（测试时两种顺序都进行了测试，下面的分析选择和自动模式一样的顺序，即先从ERP下载，再上传到ERP）。LIMS访问ERP的RFC函数及模块通过科来的TCP数据流重组，可以知道自动和手动两种模式下，LIMS调用SAP的RFC函数只有极少数存在差异，具体如下。自动模式LIMS从ERP下载数据，此过程包括2个连接。第1个连接调用SAP函数及模块的顺序如下。RFCPINGRFC_SYSTEM_INFORFC_SYSTEM_INFORFC_GET_FUNCTION_INTERFACERFC_GET_UNICODE_STRUCTURERFC_SYSTEM_INFORFC_GET_UNICODE_STRUCTURERFC_SYSTEM_INFORFC_GET_FUNCTION_INTERFACERFC_GET_UNICODE_STRUCTURERFC_SYSTEM_INFORFC_GET_UNICODE_STRUCTUREIRF_SEND_INSP_REQUIRMENTS（注：连续调用此函数若干次）第2个连接调用SAP函数及模块的顺序如下。RFCPINGRFC_SYSTEM_INFORFC_SYSTEM_INFORFC_GET_FUNCTION_INTERFACERFC_GET_UNICODE_STRUCTURERFC_SYSTEM_INFORFC_GET_UNICODE_STRUCTURERFC_SYSTEM_INFORFC_GET_FUNCTION_INTERFACERFC_GET_UNICODE_STRUCTURERFC_SYSTEM_INFORFC_GET_UNICODE_STRUCTURERFC_SYSTEM_INFORFC_GET_UNICODE_STRUCTURERFC_SYSTEM_INFORFC_GET_UNICODE_STRUCTURERFC_SYSTEM_INFORFC_GET_UNICODE_STRUCTUREQIRF_SEND_REQUIRMENTS_GET_DATALIMS上传数据到ERP，调用SAP函数及模块的顺序如下：RFCPINGRFC_SYSTEM_INFORFC_SYSTEM_INFORFC_GET_FUNCTION_INTERFACERFC_GET_UNICODE_STRUCTURERFC_SYSTEM_INFORFC_GET_UNICODE_STRUCTURERFC_SYSTEM_INFORFC_GET_FUNCTION_INTERFACERFC_SYSTEM_INFORFC_GET_UNICODE_STRUCTURERFC_SYSTEM_INFORFC_GET_UNICODE_STRUCTURERFC_SYSTEM_INFORFC_