多数据源协同条件下的数据挖掘和知识发现系统计算机科学与技术专业论文.docxVIP

④些缝是皇善感骤 ④些缝是皇善感骤 一 栅槠 1前言 1．1项目研究的背景 面对市场开放、全球化和加入WTO的挑战，加速企业经营管理信息化和智能化是中国 企业增强市场竞争力，开拓更广泛的发展空间，抢占更大的市场份额的关键。数据挖掘(Data Mining)和知识发现(Knowledge Discovery)作为商务智能(Business Intelligence或B0的核心 技术，成为企业经营管理智能化的关键问题之一。自上个世纪九十年代起，国际大型企业普 遍开始采用商务智能技术使企业经营管理更新换代。成功的企业，如沃尔玛超级连锁店，可 以在短短几年内成为本行业第一大企业。调查统计显示，企业对商务智能的投资回报率在 2-3年内可高迭400％。中国企业对商务智能技术的认识还刚刚起步，只有少数大型企业引 进了商务智能技术，如宝钢股份有限公司。目前商务智能技术还掌握在国外公司手中，这就 对中国企业采用这类新技术加大了成本。更重要的一点是这些国外技术对中国企业，特别是 制造行业的适应性差，因为这些软件在开发时没有考虑中国企业管理的特点。要求国外公司 按中国企业特点修改他们的软件产品，要价是惊人的。全面采用国外软件也不利于中国相关 软件产业的发展。本项目致力于： 开发具有自主知识产权的数据挖掘和知识发现技术，研究开发多数据源协同条件下的 数据挖掘和知识发现系统，用以推动企业的信息化和智能化进度，推动我国的企业智能软 件产业的发展。 目前，数据挖掘和知识发现技术及其应用的发展日趋成熟，IBM、SAS、SPSS、Microsoft、 SGI等公司都已经推出自身的数据挖掘或知识发现产品，此外还有COGNOS、Business Objects、Brio、SYBASE、Oracle等一些独立软件制造商的数据挖掘／知识发现相关软件产品。 国内IT系统集成商已经开始了数据仓库应用的推进。早在1997年，南天公司就与建行合作， 在建行的信贷管理系统中，构建了信贷管理系统中的数据仓库及一些相关应用，1998年在 建行全行范围内推广，取得了一定的应用价值。随着电子商务技术的发展．国内越来越多的 行业和公司都在建立自己的数据仓库，但是在商务智能方面与国外的公司相比差距较大，最 主要的原因在于未能有效而全面地进行数据仓库基础上的数据决策分析，而其关键就在于数 据挖掘和知识发现技术的运用。 作为商务智能系统中的核心技术，数据挖掘自九十年代以来就已成为计算机、统计学等 领域的研究热点。目前已开发出一大批数据挖掘算法，然而它们多注重于算法的有效性和性 能，并不能满足复杂的实际应用的需求。九十年代中期，一些研究机构开发了集成的数据挖 掘系统，例如QUEST(IBMAlmaden实验室)、DBMiner(加拿大SimonFraser大学)等。 然而，这些产品在标准化、易用性、稳定性、可扩展性等方面仍存在问题，尚处于实验室阶 段。近两年，一些软件厂商和数据挖掘研发组织开始着手制订数据挖掘操作的标准接口，其 中影响较广的有Microsoff公司制订的OLE．DB for Data Mining标准和DMG组织制订的基 于XML标准的PMML预测模型描述标准。它们的共同特点是：面向独立的数据挖掘操作， 操作之间缺乏交互性和互操作一陛。同时，统计软件，一商、数据库厂商、决策系统方案提供商 纷纷推出数据挖掘模块或软件包，例如，MicrosoftAnalysisServices(随Microsoft SQLServer 2000提供)、113M Intelligent Miner for Data、SAS Enterprise Miner、SGI MineSet等。这些产 多数据源协同条件下的数据挖掘和知识发现系统 第4页共123页 ⑧Z攫妻琏皇善黧群 ⑧Z攫妻琏皇善黧群 上黻默学企业博士后蜊陪 品不能或只能部分地支持数据挖掘操作标准，且没有统一的、灵活的数据挖掘流程定义方法。 在国内，中科院计算所、清华大学、中国科技大学、哈尔滨工业大学、南开大学、四川大学 的一些实验室和复旦大学数据挖掘课题组在过去的几年里分别开展了对数据挖掘技术的研 究工作，开发了一些通用的数据挖掘系统和新的数据挖掘算法，并在一些企业中得到了应用。 然而，据我们所知，国内对于数据挖掘、数据挖掘和制造业信息系统的集成、数据挖掘在商 务智能系统中的应用方面的研究工作仍然较少。 1．2项目研究的内容 本项目研究的最终目标是要形成我们自主知识产权的通用数据挖掘平台和产品，适用于 企业内部的遗留系统多、缺乏统一数据分析平台的问题。为实现这样的研究目标，我们要研 究开发具有自主知识产权的数据挖掘和知识发现技术。 本项目重点研究的技术包括下列五个内容： ● 面向企业的生产、经营、