基于大数据的湖北气象业务内网设计与实现.docxVIP

?

?

基于大数据的湖北气象业务内网设计与实现

?

?

张冰松汪璠王雅新杨代

摘要：本文针对湖北气象业务内网建设方面存在的诸多问题，提出了内网的设计需求、设计目标和技术路线，阐明了内网的总体结构与功能、总体数据流程、系统结构、大数据框架应用以及其他优化的具体措施等。

关键词：HBASE;气象;业务内网

中图分类号：TP311.52??文献标识码：A??文章编号：1007-9416（2020）10-0000-00

0引言

随着省级气象局信息化建设程度的不断提高，信息业务的综合服务水平明显提升，但业务应用平台建设的集约程度仍然不夠，服务规范不统一，没有集中标准化的显示和监控平台，导致服务效率不高，甚至出现数据与产品存在不一致和矛盾的情况。此外各业务系统规模小、功能简陋，系统设计与建设缺乏统一的规划和设计，整体安全防护能力弱，未能实现集约化、规模化运维，人员从事低水平重复、手工交互度高的IT系统运维等问题也制约着湖北省气象局信息化建设的快速发展。所以需要一种便捷高效的方法达成众多业务系统的统一管理和气象科学数据的共享管理以及监控管理，以更好的发挥相关业务系统的巨大价值。同时能为规范对单位内提供气象信息服务统一窗口，充分发挥信息资源的整合优势提供良好条件，使对内提供气象信息的方式集约化、标准化、规范化。因此，建设湖北气象业务内网非常必要。

1问题分析

随着业务的不断发展和数据的不断扩充，原共享系统在自动气象站数据显示方面已经无法满足用户的需求，在数据存储管理、数据共享的范围和显示速度等都存在着弊端。此外伴随着CIMISS系统的推广和应用，这些业务系统在数据集约化、一体化管理、数据准确性以及系统维护和升级等方面，还存在很多问题[1，2]，主要体现在：

（1）业务系统分散、不易维护升级。目前各省在线业务系统繁多，系统之间互相穿插，互相链接的情况频繁，虽然有公共首页可以作为统一入口，但是条理性差，系统和系统之间无法实现资源共享，服务共享，各自使用各自的标准，造成维护不便、管理困难、资源浪费。（2）没有统一的数据环境，造成数据不一致。重要数据可能存在多份拷贝或存在多个数据源中，因数据传输或系统错误或人工等原因往往造成原本应该相同的数据在不同系统中不相同的情况。（3）资料展示系统多，各自为政，不易管理。省中心尚未建立统一的气象基础资料展示系统，各级业务部门及业务系统软件直接从各自服务器获取相应的资料。各业务系统存在功能重复建设资源重复占用的现象。（4）利用云平台不够充分，各自使用小服务器，管理混乱。目前各业务系统之间并未充分利用云平台，数据接口并不规范，系统集成与业务衔接不当，容易导致信息不对称、无法管理。因此，本项目将利用现有云平台，基于CIMISS标准化数据环境进行建设，依靠一体化网络平台，统一标准，达成各业务系统集约化连接、实现资源的优化配置与共享。

2设计原则与功能需求

2.1设计原则

湖北气象业务内网以支撑气象业务发展和科技创新为目标，采用先进实用的信息技术，参考国内先进的数据管理设计经验[3-10]，实现相关业务平台的整合，系统设计和开发原则包括：（1）集约化。搭建省级气象业务运行的数据环境以及虚拟化环境，集合各业务单位的业务系统，实现业务系统基础平台资源的高效利用和专业化维护。（2）统一数据环境。以CIMISS作为主要数据源进行数据复用，遵从CIMISS数据标准进行数据存储结构拓展，建立统一分类编码、统一数据建模、统一存储的数据体系。（3）用户管理。要面向省、市、县三级用户，实现省级统一权限管理，市县级授权后访问。

2.2系统功能设计

湖北气象业务内网主要由信息显示、运行监控、业务管理、共享服务]等模块组成。其中运行监控模块实现对台站级、市县州级单位数据传输、设备状态等的综合与分类监控。主要包括：（1）数据传输监控。实现对自动站（包括国家站、区域站）观测数据、高空测风数据、GNSS/MET数据、自动土壤水分观测数据、雷达基数据等，以图形化与表格化相结合的方式向用户展示各种气象资料的发送情况，在监视界面予以告警显示。（2）设备运行状态监控。根据通信系统所接收到的设备运行状态文件、报警文件等，基于文件中的各类数据的判断规则，综合判断设备运行是否正常，并根据本级用户所在区域获取该区域所有设备的运行状态信息。（3）监控集成。将其他监控系统的地址链接配置到本系统，值班人员或业务人员可在系统导航模块快速导航到对应系统。业务管理模块对传输质量进行统计，在获取运行监控数据结果的基础上以月、年为时间跨度并支持任意时段内进行聚合统计，存储统计结果，形成统计图形、报表，为相关业务人员的决策提供数据支持。气象信息显示系统基于CIMISS实现各种气象资料和原数据资料（自动气象站、探空资料、GNSS/MET、闪电定位、自动土壤