PM2.5云监测系统后端方案-云创大数据.PDF

PM2.5 云监测系统后端方案 PM2.5 云监测系统 后端方案 1 / 10 PM2.5 云监测系统后端方案 目录 1．概述3 1.1 背景 3 1.2 意义4 2．设计5 2.1 系统架构 5 2.1.1 总体架构 5 2.1.2 系统架构功能 6 2.2 系统可靠性与扩展性 6 2.2.1 系统扩展性 6 2.2.2 系统可靠性 7 2.2.3 数据查询与统计分析子系统 7 3 ．特点9 2 / 10 PM2.5 云监测系统后端方案 1．概述 PM2.5 云监测平台系统，是基于PM2.5 测试的辅助测试。主要是反映局部区域的相关参考值， 通过先进的云计算技术数据立方的PM2.5 监测平台系统分析和处理PM2.5 数据从而和宏观上反映城 市的整体的空气质量的监测站点的监测方式形成互补。 1.1 背景 由于分散在城市周围需要大量的PM2.5 监控点（100--10000 个）需要实时的并发上传大量 PM2.5 数据，以及需要存储和处理海量的PM2.5 的历史数据，采用传统的结局方案显然难以满足需 求据存储和分析处理数据的需要。 PM2.5 云监测平台会产生极其海量的数据。假如一个城市部署了5000 个监测点，每个点每5 秒上报一次数据，则一天下来，会产生8.64 亿条记录，一年就会产生3153.6 亿条记录，十年就会 产生3 万亿条记录。从趋势分析角度看，长期保存历史数据是必要的。传统的数据库无法支撑如此 之多的数据量，必须使用云计算数据库。而目前的开源云计算数据库均无法在哪些庞大的数据集上 做到实时处理，运用云创存储的cStor 云存储系统和数据立方就成了必要的选择。 1.存储层：使用云创存储公司的cStor 云存储系统。cStor 具有极高性价比、超低功耗、高可靠、 通用、免维护等优势，可广泛应用于有大量数据存储需求的场合。功耗方面，cStor 每个节点几瓦的 功率与业界典型值200 瓦形成了鲜明的对比；存储方面，每个标准机架的最高容量可达1024TB 以 上，是国际先进水平的3 倍；成本方面，硬件与运营成本均只有同类产品的几分之一。该产品已成 功应用于视频监控、智慧交通、数字地球和动漫制作等多个领域。 2.处理层：数据立方云计算分布式数据库，即可解决海量数据的高速入库、快速索引和关联查 询等问题，使万亿条记录级的数据查询能够秒级处理。数据立方是全球第一套能够处理万亿记录级 别的商用系统，且性能远超国际先进水平。该技术在中国移动和国家电网的评测中，较之国外产品 呈现出明显的优势。目前已经开始大规模使用。 3 / 10 PM2.5 云监测系统后端方案 图表1 Intel-云创数据立方云计算一体机 1.2 意义 部署廉价的PM2.5 监测平台环境系统，配合城市现有的环境监测站点，准确、及时、全面地反 映环境质量现状及发展趋势，为环境管理、污染源控制、环境规划等提供科学依据，并结合天气状 况、城市交通、人口密度、工业产值等元素，进行系统的研究，为保护环境，改善城市的大气环境 质量改善起到技术支撑作用。具体可归纳为: (1) 根据环境质量标准，评价环境质量。 (2) 根据污染分布情况，追踪寻找污染源，为实现监督管理、控制污染提供依据。 (3) 构建云计算海量数据处理平台，存储本区域海量数据，积累长期监测资料，为研究环境容 量、实施总量控制、目标管理、预测预报环境质量提供数据。 (4) 为保护人类健康、保