Oracle物化视图在数据仓库中应用.docVIP

Oracle物化视图在数据仓库中应用 　　摘要：在数据仓库的开发中，随着业务数据量的剧增以及其数据量增加的不稳定性，如何使用一种合适的方式来实现ETL(数据的抽取，转换，装载)成为在数据仓库开发中最需要考虑的热点。本文介绍一种可以实现数据仓库ETL的技术――Oracle物化试图，并以作者在数据仓库开发实践作为例子，具体说明Oracle物化试图的实现方法。 　　关键词：数据仓库；ETL；物化试图；物化试图日志；增量抽取 　　中图分类号：TP311文献标识码：A 文章编号：1009-3044(2008)12-20000-00 　　 　　Application of Oracle Materialized View in Data Warehouse 　　XIE Ren-dong1, YANG Jun2 　　(1.Beijing Global InfoTech Group,Beijing 100013,China;2.Department of Information Management Engineering ,Jiangxi Toursm Commerce College,Nanchang 330039,China) 　　Abstract: In the data warehouse development, along with the service data quantity sharp increase the instabilitywhich increases by and its the data quantity, how uses one appropriate way to realize ETL (data extracting, transformation, loading) becomes the hot spot which most needs to consider in the data warehouse development. This article introduced one kind may realize the data warehouseETL technical - Oracle Materialized View, and takes the example by the author in the data warehouse development practice, specifically explained the Oracle Materialized View realization method. 　　Key words: data warehouse; Materialized View; data extracting; transformation; loading 　　 　　1 引言 　　 　　随着信息技术的不断推广和应用，许多企业都已经在使用管理信息系统处理管理事务和日常业务。这些管理信息系统为企业积累了大量的信息。企业管理者已经不满足于仅仅用计算机去处理每天所发生的事务数据，而开始考虑如何利用这些信息海洋对企业的管理决策提供支持。因此，产生了与传统数据库有很大差异的数据环境要求和从这些海洋数据中获取特殊知识的工具需要。这就需要一种能够将日常业务处理中所收集到的各种数据转变为具有商业价值信息的技术――数据仓库。 　　数据仓库是指一个面向主题的、集成的、随时间变化的、非易失性数据的集合，用于支持管理层的决策过程的系统。在数据仓库的开发中，技术上主要体现在ETL以及前端展现上，下面即将介绍一种ETL的实现方式――Oracle物化试图。 　　 　　2 ETL的实现方式 　　 　　ETL是指数据抽取，转换，装载。数据抽取是指从源系统中抽取数据仓库所需要的数据;数据转换是指在源系统中抽取的数据不能直接应用在数据仓库中查询，需要将这部分数据转换成满足数据仓库条件的数据;数据装载是指将抽取出来以及转换好的数据装载到数据仓库的数据库中。 　　ETL实现方式主要有以下几种(以下方式均以OLTP系统作为源系统，并进行ETL数据加载到OLAP系统)： 　　1)时戳方式：需要在OLTP系统中业务表中统一添加时间字段作为时戳（如表中已有相应的时间字段，可以不必添加），每当OLTP系统中更新修改业务数据时，同时修改时戳字段值。当作ETL加载时，通过系统时间与时戳字段的比较来决定进行何种数据抽取。 　　2)日志表方式：在OLTP系统中添加系统日志表，当业务数据发生变化时，更新维护日志表内容，当作ETL加载时，通过读日志表数据决定加载那些数据及如何加载。该方式即可用ORACLE物化视图实现。 　　3)全表比对方式：在ETL过程