水文数据在线分析与知识发现系统模型研究.pdfVIP

水 利 学 报 SHUll．IXUEBAO 第11期 文章编号：0559—9350(2001)11．0015一05 水文数据在线分析与知识发现系统模型研究 艾 萍1，王志坚1，索丽生1，倪伟新2 河海大学，南京210098；2水利部水文局，北京100053) 摘要：数据的rf线分析与知识发现是开发信息资源的高级形式．为r挖掘关于水的运动变化规律和对环境的 作用的知识，作者提出，水文数据的在线分析与知识发现系统模型 文章对模型采用的在线分析处理与数据挖 掘相结台的分屡次结梅进行丁详细阐述．并重点介绍了模型中的关键技术应用． 关键词：在线分析；数据挖掘；知i}l发现；系统模型；探度计算；水文数据智能分析 中国分类号：P333 文献标识码：A 信息获取与分析技术的快速发展，特别是遥测、遥感、网络、数据库等技术的应用．有力地促进 了水文数据的采集和处理技术的发展，使之在时间和空间的尺度及要素类型上有了不同程度的扩展 由于水在人类生存发展中的特殊作用，应用各种新技术获取水文数据，挖掘蕴藏于水文数据中的知 识，已成为水文科学发展的新热点．数字水文系统的提出是水文科学发展的时代标志之一 其核心是 如何形成数字化的、覆盖整个指定地域空间的、多重时空尺度的、多种要素的、对水文分析有用的数 据产品‘“2 这就需要研究水文数据产品的生产技术与生产模型． 水文数据从采集到应用的一般过程是：观测一整理一存储一处理一应用．在这个过程中，由于应 用的目的不同，数据处理的方法也不相同，且处理的结果可以保存起来，供应用反复使用．随着应用 对数据粒度要求的加大，将要求对已经处理过数据再进行不断的处理．换句话说，水文数据不断地被 综合成非细节的信息以适合不同层次的应用的需要这一过程是客观存在的．要提高和拓展水文信息的 日匮务能力，需要建立相应的系统模型来模拟这r一过程技术的进步提供了建立和实现这一系统模型的 方法．与所涉及的计算机及信息技术相对应，上述过程的功能可以用图1所示的系统模型来实现． 图l水文效据应用系统模型 在上述模型中，水文数据不同的存放形式与支持的应用相对应，通常的水文数据库支持一般的数 据查询应用，数据仓库支持要求综台信息的应用，而高层的应用(如决策支持)则需要从水文数据中 获得的知识来支撑．作为·个系统模型，必须对实际的过程进行抽象和简化，并要充分考虑模型各环 节的实现技术．我们以上述水文数据应用系统模型为原型，结合计算机信息技术的新发展，选择数据 Pro㈣蜘 Transaction 库与数据仓库(Dw：D咖wa咒h·mse)技术为基础，在线事务处理(0m：On．Line D砒aM；n一 i“g)、在线分析处理(0LAP：On一“neAnalyLicalPmcessi“g)和在线数据挖掘(O【DM：on．1ine 牧稿日期：20。l∞．02 基金项目：美国国际商用机器公司(IBM)的资助(006657)． 作者简卉：艾萍(196l一)，男，厶南昭通人。博}生．高级1．程师，主要研究智能数据处理 15 量已超过7000MB，加上进行水文预报所需的天气、地理等数据，进行水文分析所需要处理的数据最 很大从这些数量巨大、类型复杂的数据中及时准确地挖掘出满足需要的知识，往往因为计算能力， 存储能力、算法的不足而无能为力因此，需要高效的、建立在Deepcomputing技术和多维数据集合 技术基础之上的水文数据挖掘技术．数据挖掘技术在水文信息服务领域的应用将是多方面的“ in 数据挖掘是知识发现的核