基于日志管理珠海市气象网络数据系统.pdfVIP

第34卷第6期 广 东 气 象 V01．34 No．6 2012年12月 Meteorology December2012 Guangdong doi：10．3969／j．issn．1007—6190．2012．06．017 基于日志管理的珠海市气象网络数据系统 曾戊忠，李叶新 (珠海市气象局，广东珠海519000) 摘要：基于日志管理系统建立的气象网络数据系统，兼容原有气象网络形成了统一的系统接口， 实现数据标准化管理，解决了气象网络数据管理中存在的技术复用率低，系统日志分散、记录破碎等问 题，有效提高了气象网络数据的完整性。以该系统为平台，运用了开源软件系统等自由软件资源，开发 多个管理模块，提高了气象网络数据管理的效率。系统应用规则引擎设计了日志管理模型，实现气象网 络数据管理经验的可视化、可积累和延续应用，具有自动化程度高、生成业务产品种类多和使用方便简 捷等特点。 关键词：计算机技术与应用；日志管理；开源软件；规则引擎；半结构化语言 中图分类号：TP39 文献标识码：B 文章编号：1007—6190(2012)06—0058—03 气象业务使用大量的自动实时监测数据，这些数据 软件。在气象网络数据管理中，运用开源自由软件工具 的采集、传输和存储过程需要得到有效的管理…。目前 能大大提高管理效率和可扩展性坤J。 的气象网络数据管理松散，各部分功能模块独立运行，这 2．1 日志管理系统选型 导致了系统中无统一的接口标准，技术复用率低，系统日 本文使用物联网系统“自由感知单元族联平台”的 志分散、记录比较破碎，不能够形成规范化使用的文档记 日志管理系统。该系统包括：①日志记录管理模块，实现 录等一系列问题。随着气象网络数据的规模和复杂性指 收集、过滤和存储日志以及信息识别和处理应答功能；② 数增长，以上问题显得更加突出，对业务预报造成不利影 日志分析模块，实现系统日志的分析显示功能；③信息报 响口o。针对以上问题构建基于日志信息系统为中心形成 警模块，实现异常信息识别和自定义报警功能；④系统配 统一的管理平台，通过日志管理模型建立标准接口，运用 置模块，实现日志系统的各项自定义配置功能；⑤客户端 各种开源软件工具多方多点扩展功能，实现对整个气象 工具，实现日志汇报程序、源代码。系统的主要特点是内 网络数据的标准化、规范化管理。 置规则引擎，适合采用半结构化语言作为通讯协议，引进 类自然语言处理功能，采用智能化手段分析和处理日志 l 气象网络数据管理架构 记录，提高了数据的接口能力和信息使用率。 气象数据网络的管理对象。3’分布在网络链路层、操 2．2布设气象网络管理应用 作系统层、核心层、业务层和数据层。开发网络管理功能 1)应用linux脚本环境搭建资料管理模块。 模块，并生成管理日志。日志系统服务器(FFCenter)通 原有的资料同步方式存在以下问题：①在运行过程 过对日志集中处理，响应查询和报警提醒‘4』。其中，核心 中相互不能兼容，如因资料名格式不同则无法同步；②独 层是指气象信息数据库服务、海量存储服务等气象网络