报表系统中ETL通用框架的设计和研究.pdfVIP

第 l9卷 第 6期 计 算 机 技 术 与 发 展 VO1．19 Nt)．6 2009年 6月 COMPUT’ER 丁FCHN()1．(X；Y ANI)DFVE 【』)】【MENF JLille 2009 报表系统 中ETL通用框架的设计与研究 范金花，梁正和 (河海大学 计算机及信息工程学院，江苏 南京 210098) 摘 要 ：目前，随着企业信息的集成交换需求越来越频繁 ．使得大型报表系统研究中主要存在 以下缺陷：前端数据源的分 析处理能力低 ，导致报表生成和维护时间过长。文中在报表系统中引进 了ETL技术对前端异构数据进行有效 的汇总、分 析和数据的抽取转换加载 ，缩短 了报表系统中数据的处理时问．提高了报表生成的速度和效率，使得报表系统的通用化得 到加强。同时引人了XML技术实现了抽取和转换规则的定义，使得ETL模块具备 良好的通用性和可扩展性。 关键词：ETL；XML；异构数据；抽取转换加载 中图分类号 ：TP311；TP391 文献标识码：A 文章编号 ：1673—629X(2009)06—0202～04 Design andResearchofUniversalETL Framework inReportSystem FAN Jin—hua，LIANGZheng—he (CollegeofComputerandInformationEngineering，HohaiUniversity，Nanjing210098，China) Abstrad：Nowadays，withthetrendofirloreandmorecompani~ nadenterprisesrequiredataintegrationanddataexchange，mostofthe largereportsystemsareremainstheseproblems：theanalysisofthedatasourceislow，thecratednadmaintainedreportcosttoomuch time．Inthereportfield，theETLtechnologyhasaneffectiveanalysis，summaryandextraction—transformation—loadingtheheteroge— neousadtaaggregation，reducing theprocessingtimefordata．Alsointroduced theXML techn ology toachieveacomn3onETLmodel， whichmakesitmaintainde good versatilityandextensibility． Keywords：ETL；XML；heterogneeousad ta；extractiontrnasformationandloading O 引 言 到 目标数据 (仓)库的处理过程。降低复杂报表系统中 目前，报表的广泛应用使得报表处理-1J成为各种 数据准备过程设计、维护代价以及提高报表引擎的执 信息系统中不可缺少的重要部分，它以直观、概括、精 行效率，可以有效降低各报表系统的建设和维护代价。 简的图表形式向用户反映出了海量数据以及数据变化 文中主要研究内容 ：在通用的报表系统中引进了 信息。报表处理已经成为公认的信息系统中前台展示 ETL技术 ，设计并实现了通用的数据抽取模型。对数 的重点，随着企业信息的集成交换需求越来越频繁，单 据抽取过程进行了改进，利用XML实现了通用的抽 个数据源往往不能再满足报表设计需求，这就需要报 取规则和转换规则的定义。 表具备处理多个异构数据源的能力。因此如何生成高 效的报表引擎，如何 [总、分析、抽取各种报表数据，更