XX市气象监测预报能力提升工程-信息系统软件支撑项目建设意见.pdfVIP

-信息系统软件支撑项目建

设意见

一、项目背景及概况

当前，市气象局在气象业务布局和对外服务工作发挥了较好的效益，产生了很好

的影响力，但对外服务能力、内部合力、资源有效配置等方面仍存在很大的提升空间。目

前使用的气象观测数据和预报数据比较分散，也没有综合应用丰富的行业和社会数据，

使气象预报和服务产品缺乏个性化、专业化，也欠缺产品的多样性、及时性。因此有必要

在数据挖掘、机器学习技术日益成熟的今天,充分应用现代信息技术和软硬件条件，通过

本项目的实施建设XX市气象局“气象智能数据底座”服务平台，为智能监测、智能预

报和智能服务提供基础数据环境。在此基础上构建创新应用孵化中心，以数据底座为基

础建立决策服务材料“快写”系统、灾害天气“快呼”系统等应用系统，并为多种场景

的气象服务系统应用提供数据支撑，更好地服务于XX市气象局气象智能化应用。确保

XX市气象局在做好常规气象观测、天气预报预测和气象服务，不断加强暴雨洪涝、高温、

雷电等各类灾害性天气智能预警服务的同时，为最终实现XX市气象业务服务的“智能

监测、智能预报、智能发布”的目标提供坚实的保障。

二、建设目标

建成基于气象大数据平台的“气象智能数据底座”，支撑气象部门所有相关业务数

据资源的汇聚、管理和服务，包括数据归集与加工治理系统、数据存储与服务系统、数据

供给系统和全链条业务监控系统的建设，助力“云+端”业务模式的全面发展，构成集约

化、标准化、开放发展的气象新业态。在此基础上建立基于数据底座的创新应用孵化中

心，包括气象灾害“快呼”系统和决策服务材料“快写”系统。

三、建设内容（技术要求）

3.1“气象智能数据底座”建设

包括气象数据采集交换模块及数据清洗加工模块，并提供加工算法库管理。

3.1.1.1数据采集交换模块

开发可视化可配置数据自动采集交换软件，将XX气象各类监测/预报和服务数据、

省级大数据云平台“天擎”数据以及外部门共享数据进行归集整合，按照标准化方式存

储,形成数据存储、命名和共享规范，并与数据供给系统无缝对接；采用分布式架构设计

开发，通过主控程序调度多个采集节点基于并行化算法执行各类数据采集任务。开发数

据交换系统，实现各类数据在气象专网、气象服务DMZ区、地方政务云等网络区域实时

同步。主要包括以下建设内容：

气象数据存储、命名和共享统一规范：收集整理并按照统一的数据存储、命名和共

享规范归集整合XX气象不同数据源的各类实况监测、预报预警和服务数据，便于与数

据供给系统进行无缝对接。存储结构的管理分为结构化数据存储结构和非结构化存储结

构的管理。

气象数据采集及实时同步：针对不同的气象资源数据来源渠道，采用分布式架构设

计开发，通过并行化算法执行各类数据采集任务，采集各类气象数据，同时对采集的各类

多源观测数据进行解码、质量控制和时空变换等必要的预处理;结合不同数据的处理要求，

开发数据同步运行程序对预处理后的各类数据进行数据同步，确保各类数据的及时性。

通过完成数据采集及同步接入，将数据统一归集入库，并提供数据入库管理，包括进行库

表管理、连接管理、入库任务管理以及异常处理等服务，以对数据归集全流程进行全面、

有效的管控。

开发数据交换子系统：实现各类数据在气象专网、气象服务DMZ区、地方政务云

等网络区域实时同步。提供定义和配置内部数据集成与协同方法，对每次数据交换请求，

能根据数据报特征计算与之相匹配的数据路由，并按数据路由的定义次序依次调用相应

数据处理服务，实现不同数据库间的数据与信息共享。

3.1.1.2数据清洗加工模块

实现气象数据采集交换模块集成数据清洗和加工功能。要求数据清洗和加工相关的

算法和应用与采集交换模块解耦，通过配置方式集成，并记录和显示算法和应用执行情

况。利用数据清洗、转换、整合等手段，通过对现有中间数据和产品数据进行归类梳理，

包括实况监测、网格预报、预警等各类气象数据，构建分灾种、分行业、分渠道等能支撑

数据来源梳理：针对现有气象业务系统数据，对各类数据源进行梳理，明确归集的

各类气象源数据库，结合业务需求，实现覆盖数据采集、治理、融合、应用等各个环节的

气象数据全生命周期管理，体现数据驱动。

数据清洗转换：对采集的数据进行处理，实现数