气象大数据跨平台分析和应用技术研究.docVIP

气象大数据跨平台分析和应用技术研究 　　摘要：为了更好处理和应用诸如气象数值预报产品等非结构化的气象大数据，基于NetCDF技术实现了全序列气象数值预报产品原始格式解码、数据的格式转换以及生成符合各类数值预报产品特征的NetCDF格式的存储库，并将转换和重新组织的数值预报产品数据实时存储到相应的NetCDF库文件中；基于NCL（The NCAR Command Language）编程语言读取NetCDF库文件中的数据生成精度高、内容展现丰富的数值预报图形产品，并提供给业务用使用，业务运行结果表明大数据处理技术的引入对气象大数据在业务中的应用具有一定的促进作用。 　　关键词：气象大数据；NetCDF；数据解码；算法 　　中图分类号：TP311 文献标识码：A 文章编号：1009-3044（2013）31-6943-05 　　近年来我国的气象事业有了长足的进步和发展，广东省建设了大量的常规、特种自动气象探测设备，其传输、处理和服务应用的信息量呈指数式增长，目前广东省气象信息中心每天接收的数据量达到1T级的规模，预计未来3-5年每天接收的数据总量将会增长到1.5-2TB左右，其中80%的数据都是非结构化的大数据，目前这些非结构化的大数据仅能做到初步的实时业务应用，无法做到大数据的长时间序列存储以及进一步的分析处理和决策分析应用，这也造成了极大的“气象数据价值”浪费。因此气象行业