数据挖掘和其应用研究回顾.PDFVIP

维普资讯 2004年第7期 福 建 电 脑 9 数 据 挖 掘 及 其 应 用研 究 回顾 杨克俭 ，丁学钧 (河北建筑工程学院计算机系，河北 张家口075024) 摘【 要】 当今世界，数据每天都在迅猛增长。人们保存如此大量的数据，一是因为计算机技术的发展使 之变得方便可行。二是因为这些数据有 巨大的潜在作用。由此而产生的数据挖掘概念引起 了广泛地重视 ，出现了 许多与之相关的技术和产品。本文对数据挖掘的基本概念、基本方法和基本技术及应用研究做了较系统的综述性 回顾 。 【关键词】 数据挖掘 数据库 应用研究 1、引言 式； 求也不确定。整个挖掘过程也无法仅用 随着计算机技术的发展，各行各业都 4．数据挖掘引擎：是整个系统的核 SQL语言就能完整表达，实际上，数据挖 开始采用计算机及相应的信息技术进行 心部分，可以由以下模块组成：分类模块、 掘常常用一种类 SQL语言来描述。 管理和运营，这使得企业生成、收集、存贮 关联规则模块、聚类分析模块、时序模块 再者，传统的数据库查询一般生成严 和处理数据的能力大大提高，数据量与日 和异常分析模块等； 格的结果集，但数据挖掘可能并不生成严 俱增。企业数据实际上是企业的经验积 5．模式评价模块 ：主要是根据一定 格的结果集 。挖掘过程往往基于统计规 累，当其积累到一定程度时，必然会反映 的度量标准来与数据挖掘模块交互，以使 律，产生的规则并不要求对所有的数据项 出规律性的东西；所以对企业来说，这些 得数据挖掘向着我们感兴趣的方向进行， 总是成立 ，而是只要达到一定的事先给定 堆积如山的数据无异于一个巨大的宝 往往越是高效的数据挖掘系统这种交互 的阈值就可以了。 库。除此之外，互联网的发展更是为我们 影响的程度越高； 第三，通常情况下，数据库查询只对 带来了海量的数据和信息。但存储在各种 6．图形用户界面：主要是为方便用 数据库的原始字段进行；而数据挖掘则可 数据媒介中的海量的数据 ，在缺乏强有力 户与数据挖掘系统的交互，由用户提出挖 能在数据库的不同层次上发掘知识规 的工具的情况下，已经远远的超出了人的 掘任务、指定重要的挖掘参数 及由当前 则。 理解和概括的能力。在这样的背景下，人 返 回的结果指导进行更进一步的挖掘工 1，3数据挖掘的分类 们迫切需要新一代的计算技术和工具来 作。 数据挖掘和知识发现技术发展到现 开采数据库中蕴藏的宝藏，使其成为有用 从上述关于数据挖掘系统的讨论来 在，出现了许多技术分支和研究方向。这 的知识。另一方面，近十余年来，计算机和 看，它所有功能的完全实现决非一件简单 些技术适用于不同的数据库系统，应用不 信息技术也有了长足的进展，产生了许多 的事情 ，正因为如此，目前市场上出现的 同的挖掘技术从而挖掘出不同种类的知 新概念和新技术，如更高性能的计算机和 很多数据挖掘系统并不是严格意义上的 识。下面就数据挖掘的常见分类方法，分 操作系统、因特网 (internet)、数据仓库 这类系统。一个不能处理大数据量的系统 别加以描述： (datawarehouse)、神经网络等等。在市场 可能划分为其它类型的系统更为适合，如 1．按操纵的数据库分类 需求和技术基础这两个因素都具备的环 它可能是一个机器学习系统、或者一个统 不同的数据库其数据的描述、组织和 境下，数据挖掘 (DataMining)的概念与技 计分析工具、或一个实验性系统原型等。 存储方式均有很大不同，一般可以分为关 术就应运而生了。 同样 ，如果一个系统仅能执行一些数据或 系数据库、面向对象数据库、事务数据库、 1．1数据挖掘 的定义 信息检索任务，包括执行一些求和运算、 演绎数据库等等。因此，数据挖掘可以按 数据挖掘