高性能气象数据存储集群及在线扩展技术应用.docVIP

高性能气象数据存储集群及在线扩展技术应用 　　作者简介：赵春燕（1984—），女， 北京人，工程师，研究方向：高性能计算系统管理维护、软件配置管理（E-mail：zhaocy@cma.gov.cn）；孙英锐（1973—），男，河北迁交人，高级工程师，硕士，研究方向：气象数据存储管理。 　　摘要：为了满足气象数据快速增长和高效应用的业务需求，设计采用基于SAN和GPFS的高性能存储集群进行数据存储，并随着数据量的快速增长，实现灵活在线扩展以满足数据存储需求。结合国家级气象资料存储检索系统、省级风能资源数据库共享服务系统和风能资源数值模拟系统的存储设计，阐述基于SAN和GPFS技术的存储集群架构，并重点介绍存储集群的在线扩展技术的实现。基于SAN和GPFS的存储集群在线扩展技术包含在线扩展服务器节点、在线扩展存储容量和在线扩展文件系统容量三方面，实现了气象数据存储系统随着业务数据变化的灵活扩展，使系统具备优秀的扩展性和适应性。 　　关键词：气象数据存储；存储集群；SAN；GPFS集群；在线扩展 　　中图分类号：TP399文献标识码：A 　　1引言 　　随着气象事业和科技水平的迅速发展，气象数据的种类、数量也随之迅速增长，目前气象数据的存储采用数据库和共享文件系统两种技术，根据数据特点和服务方式将数据按照在线、近线和离线三种方式进行存储。由于气象数据种类多、数量大、格式多样，除