上海水务数据中心建设规范的设计与研究.docxVIP

上海水务数据中心建设规范的设计与研究龚岳松，李静芳，吕文斌，李 佼（上海市水务信息中心, 上海 200050）摘 要：结 上海水务数据中心建设规范的设计与研究 龚岳松，李静芳，吕文斌，李 佼 （上海市水务信息中心, 上海 200050） 摘 要：结合上海水务信息化的发展现状，从数据中心结构、命名规则、交换与服务等方面进行深入研究和设 计，形成 1 套满足全上海市水务行业需求的水务数据中心建设规范。具体介绍各类数据的命名规则，详细分析 如何实现多源异构系统间的数据在数据中心中的规范整合，阐述设计中的关键技术。目前该研究成果已通过大 量应用的检验，并在上海水务信息系统中得到使用和推广。 关键词：上海水务；数据中心；建设规范；多源异构；规范；规范整合 中图分类号：TV21 文献标识码：A 文章编号：1674-9405(2012)03-0054-07 0 引言 统架构，Java，.Net 与其他工业组态软件多种技术路 线，SQL Server，Oracle，SyBase，DB2，Foxpro 等 多类数据库，数据多源异构、技术路线差异极大，难 以实现全市水务行业高效的数据交换及共享。 以实时雨量为例，水务数据中心的数据主要来 源于上海市气象局、水文总站、排水公司，以及区 县防汛和水文部门等单位。各单位实时系统的雨量 测站编码、报数及其雨量计算规则均差距很大，需 要按照统一的计算规范和编码规律进行规范整合， 各单位雨量测站编码及计算规则如表 1 所示。 同时，在水务数据中心未建设之前，各单位信 息系统及数据库之间采用的数据交换主要是传统的 “点对点交换模式”，即应用系统之间数据库直连 的紧耦合交换模式。由于这种数据交换模式需要对 两端系统进行源码级开发，会对原有系统稳定性产 生一定影响。随着交换单位需求越来越多样，数据 交换的复杂度也会与日俱增，数据交换将由一对一 变成一对多甚至是多对多，相应的数据交换规则和 程序开发量将呈几何倍数增长，最后形成蛛网状。 这种交换模式既难以开发也难以维护，改动一点， 可能导致数据交换甚至业务系统的瘫痪，将很难适 应水务发展需求。 近年来，上海水务部门陆续开展了大量信息化 建设工作，建成了涵盖供水、排水、水利 3 大行 业，具有防汛指挥、水资源管理、水环境治理、水 务工程管理等业务功能的近 50 余套信息系统，累积 了从 1998 年以来超过 4 TB 数据量的多比例尺和时 相的数字地形图、遥感影像及实时数据资料。这些 系统的建设和数据资料的累积，既为上海建设“智 能水网”奠定了翔实的数据基础，又对如何梳理、 规范现有多源异构数据，整合归并形成能够满足上 海水务行业需求的核心数据提出了新的要求。 为规范各单位信息系统的水务数据，设计了能 够对上海水务多源、多态、海量数据进行规范整合 的水务数据中心建设规范，以期为上海市水务局局 属各单位数据库的建设提供参考和借鉴。 1 问题的提出 上海市水务局现有各单位的信息系统由于建设时 间、设计理念和施工单位不同，其技术路线、系统架 构、数据库结构也各不相同：存在 C/S 与 B/S 多种系 收稿日期：2012-02-17 基金项目：水利部科技推广计划项目（TG1060）；水利部“948”项目（201107）；上海市海洋局科研项目（沪海科2011-05） 作者简介：龚岳松（1980－），男，江苏启东人，工程师，主要从事水务信息化及信息技术管理工作。 第3 期龚岳松等：上海水务数据中心建设规范的设计与研究5 5表 1 各单位雨量测站编码及计算规则表序号来源单位原测站编码规则测站编码实例原雨量值计算规则5 min 采集 1 次，按小时累加，到整点清零1市气象局5 位数字构成例如：99103（黄浦公园）6 位数字构成：4 位测站编号 ＋ 2 位传感器号5 min 格雷码数值，两者相减，乘分辨率2市水文总站例如：202140（黄浦公园）5 第3 期 龚岳松等：上海水务数据中心建设规范的设计与研究 5 5 表 1 各单位雨量测站编码及计算规则表 序号 来源单位 原测站编码规则 测站编码实例 原雨量值计算规则 5 min 采集 1 次，按小时 累加，到整点清零 1 市气象局 5 位数字构成 例如：99103（黄浦公园） 6 位数字构成：4 位测站 编号 ＋ 2 位传感器号 5 min 格雷码数值，两者相 减，乘分辨率 2 市水文总站 例如：202140（黄浦公园） 5 min 采集 1 次，按天累加， 到 8∶00 清零 3 市城市排水公司 例如：6（西藏北） 自 1 开始阿拉伯数字编目 5 min 时段雨量 10 min 时段雨量 5 min 时段雨量 4 5 6 徐汇区市政水务署 闵行区防汛办 浦东新区水文水资源署 例如：37（徐家汇站） 例如：98404（曹