水利数据中心建设数据质量控制方案研究.pdfVIP

第 5 期 水 利 信 息 化 N O .5 2012 年 10 月 Water Resources Informatization Oct.,2012 水利数据中心建设数据质量控制方案研究 莫 洁 （广东省防汛抢险技术保障中心，广东 广州 510635 ） 摘　要：真实、准确、完整、有效的数据是水利数据中心最基础和最重要的内容，以广东省水利数据中心建设 为例，对水利数据中心建设中数据质量控制的目标、原则和关键环节，以及数据收集、整编、入库过程中质量 控制的方法和步骤进行分析研究。研究的数据质量控制方法，具有较强的可操作性，可为今后各级水利数据中 心、分中心 （节点）的建设提供参考和借鉴。 关键词：水利数据中心；数据中心建设；数据质量控制；控制方案；控制目标 中图分类号：TV2n　　　　　文献标识码：A　　　　　　文章编号：1674-9405(2012)05-0020-05 随着我国行业领域信息化的持续推进，数据资 移民、实时水雨情、实时工情、气象信息、热带气 源整合共享的需求越来越迫切，各行业、领域数据 旋、灾情、历史大洪水、社会经济信息、水利行政 中心建设陆续上马。广东省水利数据中心于 2009 年 管理基本信息、水利规划、水利法规政策、水利人 11 月开始实施建设，计划 20 12 年底前完成，主要 才管理、水利科技管理、水利工程管理、水政监 任务是收集、整合和完善全省水利信息数据资源， 察、河道采砂管理等数据 [1]64 。 建立统一的水利数据资源环境共享交换体系，建设 1.2 主要特点 支持全省水利系统及各级政府部门信息共享和业务 广东省水利数据中心所涉数据资源的主要特点 协同的公共核心支撑平台，逐步形成标准、开放的 如下： 水利信息资源服务窗口，为广东省各类水利业务应 1）面广量大。数据覆盖省、地 （市）、县 （市） 用提供数据支撑 [1]13-20 。数据中心的建设，海量甚至 和乡 （镇）各级，涵盖所有水利相关业务和绝大部 是云量的数据必不可少，真实、准确、完整、有效 分水利工程，厅机关档案室仅 2 个年度工程类资料 的数据是数据中心最基础和最重要的内容，数据质 就超过 1 万份，已建三防指挥系统数据库仅水利工 量控制是数据中心建设的核心，贯穿于数据中心建 程静态信息就超过 30 万条记录，预计整个水利数据 设和管理全过程，现以广东省水利数据中心建设为 中心数据量以千万条记录、几十个 TB 计。 例，对建设过程中数据从收集到入库各阶段的数据 2 ）存放分散。数据存放单位较多，有档案、业 质量控制方案进行研究。 务部门，设计科研单位，基层水利部门，以及已经 开发建设的信息系统。 1 数据主要内容和特点 3 ）一数多源。同一个数据由于形成的时间、地 点、部门、方式等的不同，造成数据来源不同，内 1.1 主要内容 容各异。 广东省水利数据中心建设所涉数据资源，主要 4 ）标准不一。已建数据库因早期缺乏统一的技 包括基础和专业数据，共 25 类，具体有：水利工 术标准和规范，导致不同部门开发应用的数据库编 程、水利空间、水文、水资源、水质、地下水、水 码