基于MGO的数据仓库ETL过程构建方法 - 重庆理工大学学报.PDFVIP

第２８卷　第２期 重 庆 理 工 大 学 学报（自然科学） ２０１４年２月 Ｖｏｌ．２８　　Ｎｏ．２ ＪｏｕｒｎａｌｏｆＣｈｏｎｇｑｉｎｇＵｎｉｖｅｒｓｉｔｙｏｆＴｅｃｈｎｏｌｏｇｙ（ＮａｔｕｒａｌＳｃｉｅｎｃｅ） Ｆｅｂ．２０１４  ｄｏｉ：１０．３９６９／ｊ．ｉｓｓｎ．１６７４－８４２５（ｚ）．２０１４．０２．０１４ 基于ＭＧＯ的数据仓库ＥＴＬ过程构建方法 余肖生，吴西燕，王东娟，王缓缓，蒋　彬 （三峡大学 计算机与信息学院，湖北 宜昌　４４３００２） 摘　　　要：数据仓库ＥＴＬ过程的构建与维护在数据仓库的建设与使用中有举足轻重的作用。 首先对现有ＥＴＬ过程的构建方法及其发展进行分析比较，指出不足。在此基础上，介绍基于 ＭＧＯ（通用操作符）的ＥＴＬ过程的构建方法，并将其与现有ＥＴＬ过程的构建方法进行比较。最 后以通用操作符的实现为例，描述通用操作符的实现流程。 关　键　词：数据仓库构建；ＥＴＬ；通用操作符 中图分类号：ＴＰ３９　　　　文献标识码：Ａ 文章编号：１６７４－８４２５（２０１４）０２－００６３－０４ ＥＴＬＭｅｔｈｏｄｆｏｒＣｏｎｓｔｒｕｃｔｉｎｇＤａｔａＷａｒｅｈｏｕｓｅＢａｓｅｄｏｎＭＧＯ ＹＵＸｉａｏｓｈｅｎｇ，ＷＵＸｉｙａｎ，ＷＡＮＧＤｏｎｇｊｕａｎ，ＷＡＮＧＨｕａｎｈｕａｎ，ＪＩＡＮＧＢｉｎ （ＣｏｌｌｅｇｅｏｆＣｏｍｐｕｔｅｒａｎｄＩｎｆｏｒｍａｔｉｏｎ，ＴｈｒｅｅＧｏｒｇｅｓＵｎｉｖｅｒｓｉｔｙ，Ｙｉｃｈａｎｇ４４３００２，Ｃｈｉｎａ） Ａｂｓｔｒａｃｔ：ＩｔｉｓｖｅｒｙｉｍｐｏｒｔａｎｔｆｏｒｄａｔａｗａｒｅｈｏｕｓｅｃｏｎｓｔｒｕｃｔｉｏｎａｎｄｍａｉｎｔｅｎａｎｃｅｔｏｐｒｏｃｅｓｓＥＴＬ．Ｆｉｒｓｔ ｌｙ，ｔｈｉｓｐａｐｅｒｃｏｍｐａｒｅｄｗｉｔｈｔｈｅｅｘｉｓｔｉｎｇＥＴＬｐｒｏｃｅｓｓａｎｄｐｏｉｎｔｅｄｏｕｔｉｔｓｄｅｆｉｃｉｅｎｃｙ．ＥＴＬｍｅｔｈｏｄｆｏｒ ｃｏｎｓｔｒｕｃｔｉｎｇｄａｔａｗａｒｅｈｏｕｓｅｂａｓｅｄｏｎＭＧＯｗａｓｐｒｏｐｏｓｅｄｉｎｔｈｅｐａｐｅｒ．Ｔｈｅｎｇｅｎｅｒｉｃｏｐｅｒａｔｏｒｒｅａｌｉｚａ ｔｉｏｎｐｒｏｃｅｓｓｗａｓｐｒｏｐｏｓｅｄａｎｄａｓｉｍｐｌｅｇｅｎｅｒｉｃｏｐｅｒａｔｏｒｗａｓｉｍｐｌｅｍｅｎｔｅｄｉｎｔｈｅｃａｓｅｓｔｕｄｙ． Ｋｅｙｗｏｒｄｓ：ｃｏｎｓｔｒｕｃｔｉｎｇｄａｔａｗａｒｅｈｏｕｓｅｓ；ＥＴＬ；ＭＧＯ 　　在数据仓库构建过程中，作业量最大、日常运 方法，并将其与现有 ＥＴＬ过程的构建方法进行比 行中出现问题最多的是从业务数据库向数据仓库 较；最后以一个通用操作符（平面文件加载器）的 ［１］ 抽取、变换、集成数据的作业，即ＥＴＬ 。ＥＴＬ过 实现为例，描述通用操作符的实现流程。 程在数据仓库的建设与维护中占据了相当重要的 ［２］ 位置 。ＥＴＬ过程设计的优劣已经成为数据仓库 １　现有ＥＴＬ比较 建设中降低维护成本、提高ＥＴＬ过程执行效率的 关键。本文首先对现有ＥＴＬ过程的构建方法及其 １．１　手工ＥＬＴ 发展进行分析比较，并指出其不足；在此基础上， 在数据仓库概念提出之前，决策支持系统概 介绍基于ＭＧＯ（通用操作符）的ＥＴＬ过程的构建 念已经被人们广为接受。当时，由于没有专门工 　　收稿日期：２０１３－１０－２２ 基金项目；宜昌市科学技术研究与开发项目（Ａ２０１２－３０２－１９） 作者简介：余肖生（１９７３—），男，副教授，主要从事信息管理与电子商务研究。 引用格式：余肖生，吴西燕，王东娟，等．基于ＭＧＯ的数据仓库ＥＴＬ过程构建方法［Ｊ］．重庆理工大学学报：自然科学 版，２０１４（２）：６３－６６． Ｃｉｔａｔｉｏｎｆｏｒｍａｔ：ＹＵＸｉａｏ