新一代天气雷达基数据转存归档系统设计和应用.pdfVIP

新一代天气雷达基数据转存归档系统设计和应用 邹书平1卜英竹1武孔亮2潘徐燕1 (1贵州省气象信息中心，贵阳．5∞∞2；2贵州省毕节市气象局，毕节，570000) 摘要 针对贵州省新一代天气雷达基数据存储信息量大的问题。研制了新一代天气雷达基数据转存归档索引系统。实 现了对分散存储的雷达基数据进行集中转存和归档，以保证新一代天气雷达基数据的完整性和连续性。通过事例分 析了新一代天气雷达基数据文件数量、中断观测次数、中断时长等情况。该系统不仅满足了实际工作中对新一代天 气雷达基数据长期归档保存的要求，而且能够为业务服务提供所需时段的新一代天气雷达资料的完整性和连续性的 检索服务。同时，系统的应用为建立统一规范的数据接口，实现资辩的汇聚存储，建立集约化数据环境提供了基础 条件。 关键词：基数据存储设计 l引言 随着气象业务的快速发展，尤其是大量气象业务系统。如MICAPS、SWAN、CIMISS等系统的推 广应用，各级气象部门建立了各类规模不等的气象数据存储系统。沈文海等”j依托于短期气候预测 业务系统工程建设项目，建立起集资料收集处理、资料存储管理、资料检索、系统监控、用户管理 和备份／分级存储管理等多项功能的“国家级气象资料存储检索系统(MI)SS)”，对气象预报预测、 防灾减灾等业务科研提供强有力的实时的气象数据支撑。王恕等幢3研制了“实时资料归档与检索系 统”，系统以磁盘阵列和DYD光盘为主要存储介质。利用自动分类、光盘刻录的自动控制和多样化 的检索技术，实现了气象资料的自动存储与管理。滕水昌等协1研制地面气象资料数据管理检索系统、 徐芬等㈨设计了多普勒天气雷达原始资料索引数据库。 然而，随着气象实时观测业务的发展，实时资料数据存储量不断增加，实时资料归档转储的 工作量增大，数据有效存储管理交得更加复杂。贵州气象资料集中和分散的存储管理方式依然存在， 不仅占有大量的存储资源，而且资源利用率极低。如。贵州省气象信息中心主要收集和归档国家级 自动气象观测站、区域气象自动站、高空探测等实时气象资料：自2006年以来，贵州省气象台收集 和归档气象卫星云图、新一代天气雷达、数值预报产品等实时气象资料；还有风能资源、固态降水 等贝日分散存储在其他业务部门中。 针对贵州自身气象数据环境建设问题，我们采取规范各类数据存储管理的方法，逐步建立集约 ·基金资助：国家自然科学基金项目、贵髑省科学技术基金(黔科台J字[2012]22鹅弓) 第一作者简介：邹书平，男，高级工程师，主要从事天气雷达资料分析应用。Emil；zspin999知q．c∞ 化数据环境。第～阶段对分散存储的数据进行集中转存和归档，以保证资料的完按性和连续性；第 二阶段建立统一规范的数据接口，实现资料的汇聚存储，建立集约化数据环境。目前，我们重点针 对贵州省新一代天气雷达(CINRAD／CD)基数据存储信息量大的问题，研制了新一代天气雷达基 数据转存归档索引系统。通过该系统完成2006年以来，贵州5部新一代天气雷达基数据资料转存归 档，以及2013年5．7月贵州省山洪外场观测试验新一代天气雷达数据集的制作。 2系统概述 新一代天气雷达基数据转存归档索引系统是按照气象资料集中汇聚存储归档要求，按照气象信 息存储技术特点，采取大容量磁盘阵列存储设备，建立面向业务服务科研人员的集雷达观测基数据 资料的收集、归档、存储、检索和服务于一体的后台业务处理系统。新一代天气雷达基数据数据量 大，每个体扫基数据文件大小12．3MB，压缩后文件大小平均约750KB．单站每日平均约255个基数 据文件。存储量约3．2GB，压缩后约180MB：单站月平均约7650个基数据文件，存储量约96GB， 压缩后约5．3GB。系统的应用，使雷达实时资料归档业务的质量和工作效率有了极大提高。 3系统结构和功能特点 新一代天气雷达基数据转存归档索引系统由转存和记录、文件记录、记录查询、初始参数设鼍、 转存和记录批处理、文件记录批处理，以及后台自动批处理等功能组成。新一代天气雷达基数据文 件转存和记录可以由后台自动批处理自动完成。图1是新一代天气雷达基数据转存归档索引系统后 台处理主界面。 图1新一代天气嚣达基数据转存}Ei】档索引系统 “转存”——对指定时段内的雷达基数据文件转存到指定的文件夹中；“记录”——对指定时 段内的雷达基数据文件的数量、大小、中断观测时段等进行记