构建完备气象数据管理体系.doc

构建完备气象数据管理体系 　　一、引言 如同预料的那样，附着并堆积在大数据身上的泡沫正在次第破裂，嘈杂喧嚣的舞曲正在渐近尾声，舞池中的人群已逐渐散去。尽管乐队又奏响了另一支新曲：人工智能，一些精力充沛长袖善舞者重新打起精神、跃跃欲试，但不少疲惫的人已开始厌倦了被业界的乱流涌去推来的被动。是时候平静下来，清理思路，盘算一下自己未来的工作走向和工作重点了 “大数据虚热”渐渐冷却了，但“数据”这个字眼已深深印在每个人的头脑中。数据是信息的载体之一。做为社会公益部门的、以信息服务为基本业务特征的气象部门，从诞生之日起便与数据有着生死与共的紧密关系，没有数据，气象工作的一切便无从谈起。气象部门的各色人等，每日在各自的岗位上的所说和所做，无不与数据相关。气象部门离不开数据，数据是维系气象部门生命的血液 数据是极端重要的，重要的东西更需要精心打理。面对着正在渐渐沉静下来的大数据潮汐，刚刚攀上礁石、喘息甫定的我们应该反躬自问：我们对数据真的十分珍惜吗？我们对视为血液的数据真的悉心打理（也就是全面科学地管理）了吗？我们对数据的管理水平真的如同我们对数据价值的认知那样相匹配吗？我们的数据管理手段、方法、制度以及相关能力真的已经基本完备，可以自豪地向世人展示我们骄人的成果了吗？我们的基于当前最新成就的数据管理体系果真建立起来了吗？ 笔者对此很难抱以乐观态度 二、气象数据管理体系的内涵 就本质而言，气象数据管理既是一项职能，也是一种持续不断的活动。因而也就必然具备基本的目标和活动内容 （一） 数据管理目标 国际数据管理协会（DAMA国际）对数据管理的职能和目标已有覆盖面较为广泛、内容较为全面的定义。参照其文，气象数据管理做为一项职能，其目标可分为战略性和非战略性两种，其中： 1. 战略目标 笔者认为，气象数据管理的战略目标大致可有以下几点： （1）理解气象部门及政府和社会等相关部门、团体、企业和个人对气象信息的需求 （2）获取、存储和保护气象数据，确保气象数据资产的完整性 （3）确保并不断提高气象数据和信息的质量，包括：数据的准确性、?稻莸耐暾?性、数据的专业化整合和综合性整合、数据采集和获取的及时性、数据的相关性和实用性、被共同接受的明晰的数据定义等等 （4）确保气象数据的保密要求不被损坏 （5）确保气象数据和信息资产的有效利用和价值的最大化 2. 非战略目标 （1）确保气象数据管理工作的各种努力与气象部门的战略和业务目标达到高度一致 （2）在气象部门内确保数据管理的一致性 （3）促进全部门对气象数据资产价值的更广泛和深入的理解 （4）控制气象数据的管理成本 鉴于上述内容皆属常识，故不再逐一阐释 （二） 数据管理活动 一系列完备的、有组织的专业化活动，是实现数据管理职能目标的具体措施和行动。DAMA国际将这些活动归纳为以下十一种 ： 数据治理、数据架构管理、数据开发管理、数据操作管理、数据安全管理、参考数据和主数据管理、数据仓库和商务智能管理、文档和内容管理、元数据管理、数据质量管理、数据全生命周期管理，见图1： 气象部门有自己的特点，上述内容并非全部适用，很难也无必要全盘照搬。笔者将根据自己的研究和理解，在下一章里就其中若干对气象数据管理工作具有重要意义的活动予以介绍和分析 三、几个重要数据管理活动的解释和分析 （一） 数据操作管理 所谓数据操作管理，就是对平常所说的对气象数据增、删、改、查等操作的规则的建立以及依据规范所进行的一系列相应管理活动。业界通常对这些操作动作的称谓分别为：数据建立（Create）、数据读取（Read）、数据更新（Update）和数据删除（Delete），亦即业界流行的缩写“CRUD” 数据操作管理的作用，一方面能够规范所有用户（包括管理人员）对气象数据的操作行为，另一方面亦能够规范所有用户的数据应用方式，从而使得各用户对气象数据的操作始终处在规范的、可管控的状态之中 此外，数据操作管理的派生作用，是使得数据管理者可以明确系统的核心数据由哪些系统产生，哪些系统有权限读取这些核心数据，以及这些核心数据的更新和删除权限属于哪些系统；从而便于采取措施保障气象核心数据的安全性和一致性 （二） 数据质量管理 业界公认的有关数据质量的内涵，主要包括数据的正确性、数据的一致性和数据的完整性等 气象业务对数据有着天然的依赖性和敏感性，因此气象部门对于气象数据的质量始终高度关注 1. 数据正确性管理 气象数据的正确性（尤其是观测数据的正确性）关乎气象业务的工作质量，是气象部门最为重视的工作内容之一。而迄今为止气象部门对于数据正确性的管理，也主要聚焦在气象数据中的观探测数据