orm工业流水线实时分析系统设计与实现.PDFVIP

第３４卷第１１期　　　 计算机应用与软件 Ｖｏｌ３４Ｎｏ．１１ ２０１７年１１月　　 ＣｏｍｐｕｔｅｒＡｐｐｌｉｃａｔｉｏｎｓａｎｄＳｏｆｔｗａｒｅ Ｎｏｖ．２０１７ 基于Ｓｔｏｒｍ的工业流水线实时分析系统设计与实现 陈志云　肖楚乔 （华东师范大学计算机科学与软件工程学院　上海２０００６２） 摘　要　　随着全球云计算、大数据、物联网和人工智能等技术在工业领域的兴起，数据成为了工业４．０时代的 核心驱动力。为了弥补Ｈａｄｏｏｐ分布式系统在实时工业数据处理中显现的不足，提出基于Ｓｔｏｒｍ的工业流水线实 时分析系统。该系统通过嵌入ＳＤＫ实时采集终端数据，利用Ｎｇｉｎｘ服务器将数据转换成日志文件，并采用分布式 消息系统Ｋａｆｋａ缓存，消息流入Ｓｔｏｒｍ进行分析处理后，将结果存入ＨＢａｓｅ中。最后从系统的保障性，并行性和实 时性等方面进行分析，表明该系统非常可靠地将各个终端收集到的工业数据实时转换成有价值的信息输出，方便 数据资源的汇总与优化。 关键词　　工业大数据　Ｓｔｏｒｍ　Ｋａｆｋ