基于分布式流式计算的蛋鸡养殖实时监测与预警系统-农业机械学报.pdfVIP

２０１６年 １月 农 业 机 械 学 报 第 ４７卷 第 １期 ｄｏｉ：１０．６０４１／ｊ．ｉｓｓｎ．１０００１２９８．２０１６．０１．０３４ 基于分布式流式计算的蛋鸡养殖实时监测与预警系统 １，２ １ ２ ３ ４ ３ 陈红茜 　滕光辉 　邱小彬 　孟超英 　曹晏飞 　汪　成 （１．中国农业大学水利与土木工程学院，北京 １０００８３；２．中国农业大学网络中心，北京 １０００８３； ３．中国农业大学信息与电气工程学院，北京 １０００８３；４．西北农林科技大学园艺学院，陕西杨凌 ７１２１００） 摘要：为实现蛋鸡养殖生产过程参数实时监测与预警，研发了基于分布式流式计算框架 ＤａｔａＣａｎａｌ的蛋鸡养殖实 时监测与预警系统。ＤａｔａＣａｎａｌ是面向数据流的分布式计算框架，使用控制流集中、数据流分散的模型，以分布式 文件系统为中间结果的存储，支持异地多数据源的实时采集和处理。系统以ＤａｔａＣａｎａｌ为基础设施，在具有一定扩 展性的情况下，保证实时性。系统采用 Ｂｒｏｗｅｒ／Ｓｅｒｖｅｒ模式，用户通过浏览器即可访问，提升了信息共享的便捷性。 系统实现了规模化蛋鸡生产过程实时数据采集与展示、生产信息管理、实时预警、决策分析和系统管理功能，对蛋 鸡养殖全生命周期进行了全方位的管理。运行效果表明，该系统可以解决规模化蛋鸡生产过程中产生海量数据信 息化和实时处理问题，在部署 ８台机器的情况下，ＤａｔａＣａｎａｌ集群的处理能力峰值达到 １６０ＭＢ／ｓ，延迟在分钟级别， 在线上实验环境中，ＤａｔａＣａｎａｌ集群每天处理约２５ＧＢ的数据，而且系统后期维护和升级都极为便利。 关键词：蛋鸡；流式计算；分布式；实时监测；预警系统 中图分类号：Ｓ８１５；ＴＰ３９１ 文献标识码：Ａ 文章编号：１０００１２９８（２０１６）０１０２５２０８ ＲｅａｌｔｉｍｅＭｏｎｉｔｏｒｉｎｇａｎｄＥａｒｌｙＷａｒｎｉｎｇＳｙｓｔｅｍＢａｓｅｄｏｎ ＳｔｒｅａｍＣｏｍｐｕｔｉｎｇｆｏｒＬａｙｉｎｇＨｅｎｓＲａｉｓｅ １，２ １ ２ ３ ４ ３ ＣｈｅｎＨｏｎｇｑｉａｎ 　ＴｅｎｇＧｕａｎｇｈｕｉ　ＱｉｕＸｉａｏｂｉｎ　ＭｅｎｇＣｈａｏｙｉｎｇ　ＣａｏＹａｎｆｅｉ　ＷａｎｇＣｈｅｎｇ （１．ＣｏｌｌｅｇｅｏｆＷａｔｅｒＲｅｓｏｕｒｃｅｓａｎｄＣｉｖｉｌＥｎｇｉｎｅｅｒｉｎｇ，ＣｈｉｎａＡｇｒｉｃｕｌｔｕｒａｌＵｎｉｖｅｒｓｉｔｙ，Ｂｅｉｊｉｎｇ１０００８３，Ｃｈｉｎａ ２．ＮｅｔｗｏｒｋＣｅｎｔｅｒ，ＣｈｉｎａＡｇｒｉｃｕｌｔｕｒａｌＵｎｉｖｅｒｓｉｔｙ，Ｂｅｉｊｉｎｇ１０００８３，Ｃｈｉｎａ ３．ＣｏｌｌｅｇｅｏｆＩｎｆｏｒｍａｔｉｏｎａｎｄＥｌｅｃｔｒｉｃａｌＥｎｇｉｎｅｅｒｉｎｇ，ＣｈｉｎａＡｇｒｉｃｕｌｔｕｒａｌＵｎｉｖｅｒｓｉｔｙ，Ｂｅｉｊｉｎｇ１０００８３，Ｃｈｉｎａ ４．ＣｏｌｌｅｇｅｏｆＨｏｒｔｉｃｕｌｔｕｒｅ，ＮｏｒｔｈｗｅｓｔＡ＆ＦＵｎｉｖｅｒｓｉｔｙ，Ｙａｎｇｌｉｎｇ，Ｓｈａａｎｘｉ７１２１００，Ｃｈｉｎａ） Ａｂｓｔｒａｃｔ：Ｗｉｔｈｔｈｅｒａｐｉｄｄｅｖｅｌｏｐｍｅｎｔｏｆｃｏｍｐｕｔｅｒｔｅｃｈｎｏｌｏｇｙ，ｉｔｓｐｏｓｓｉｂｌｅｔｏｐｒｏｃｅｓｓｍｕｌｔｉｔｙｐｅａｎｄ ｍａｓｓｄａｔａｒｅａｌｔｉｍｅｌｙ．Ｉｎｏｒｄｅｒｔｏａｃｈｉｅｖｅｒｅａｌｔｉｍｅｍｏｎｉｔｏｒｉｎｇａｎｄｅａｒｌｙｗａｒｎｉｎｇｉｎｌａｙｉｎｇｈｅｎｒａｉｓｅ，ａ ｓｙｓｔｅｍｂａｓｅｄｏｎａｄｉｓｔｒｉｂｕｔｅｄｓｔｒｅａｍｉｎｇｃｏｍｐｕｔｉｎｇｆｒａｍｅｗｏｒｋ“ＤａｔａＣａｎａｌ”ｗａｓｄｅｖｅｌｏｐｅｄ．ＤａｔａＣａｎａｌ ｉｓａｄａｔａｆｌｏｗｏｒｉｅｎｔｅｄｄｉ