基于HBase的农业无线传感信息存储系统.pdfVIP

计 算 机 系 统 应 用 2012 年 第 21 卷 第 8 期 ① 基于 HBase 的农业无线传感信息存储系统 周利珍，陈庆奎 (上海理工大学 光电信息与计算机工程学院, 上海 200093) 摘 要：无线传感网络由于分布的跨区域性，随着无线传感网络的扩张，如何高效组织存储这些跨区域的大规 模的传感数据是近年来研究的热点和难点。根据大规模传感器数量大、分布广的特点，设计使用分层次的分布 式存储方案。Hadoop 的HBase 是一个分布式的数据库，提供实时读写、随即访问、高可扩展性和高可用性的存 储服务。使用 HBase 构建两层存储架构，分别存放区域内传感器数据和传感器数据的元数据。实验表明，该系 统有良好的扩展性、存储和查询效率，能够满足大规模传感器数据的存储问题。 关键词：云计算；Hbase ；分布式存储；无线传感网络；物联网 HBase-Based Storage System for Wireless Sensor Information of Agriculture ZHOU Li-Zhen, CHEN Qing-Kui (School of Optical-Electrical and Computer Engineering, University Of Shanghai for Science and Technology, Shanghai 200093, China) Abstract ：Wireless Sensor Networks which spread widely, and with the expansion of WSNs make it difficult to store the collecting massive data. Considering large number of sensors which is large number and widespread, this paper designs layered distributed storage solution, Hbase, which is a project of Hadoop, is a distributed database, providing real-time read/write random-access large-scale data sets ，high scalable and high available storing service. This paper will describe how to store the massive data by two layer storage architecture to store sensor data from different regions and meta data of those sensors. Experiments show that this system with high scalability, storage and query efficiency can solve the massive sensor data storage. Key words ：cloud computing; HBase; distributed storage; wireless sensor network; internet of things 随着物联网[1-3]在中国的推广，信息技术界面临 近年来，随着云计算技术的发展，学术界对海量 [4] [5] 数据存储进行深入探讨，以 Hadoop[7] 海量信息存储 问题。无线传感网 作为物联网末端 集群为代表的分 信息存储，分布区域越来越广，规模越来越大，产 布式计算技术以及 HBase[8]存储系统以列存储数据， 生信息量飞速增长。举例来说，若传感器采样频率 HBase 是 BigTable[9] 的开源实现。传感器数据类型单 为 5s，那么一天