面向数据仓库和数据整合的ETL系统的设计和实现-计算机技术专业毕业论文.docx

山东大学硕士学位论文 山东大学硕士学位论文 摘 要 随着信息技术的高速发展，信息资产逐渐成为现代企业核心竞争力的重要组 成部分，如何有效的管理企业在运营过程中产生的数据，为企业决策提供依据已 经成为信息管理人员所面临的最重要课题。自1970年E．F．Codd博士提出关系 型数据库模式以来，历经近40年的发展，关系型数据库系统已经成为数据管理 领域的主流，然而这种以快速响应为目标的事务系统模式在面向主题的数据分析 应用中存在着先天性不足。因此，在现有关系型数据库之上构建操作数据存储系 统(ODS)成为优化企业信息管理，进一步提供有效决策支持的重要技术手段之一． 本文以本人近期参与的建行ODS项目为依托，首先从ODS技术的概念和实现 技术入手，对ETL技术中各个关键步骤(抽取÷转换÷加载)的实现机理进行了 深入探讨。本文详细介绍了中国建设银行ODS系统中ETL总体架构和应用部署方 案，作为本人工作的重点，本文提出了将原有的业务平台数据移植到ODS系统的 方法，利用ETL技术将原来部署在山东省分行的中间业务平台数据、IC卡系统 数据、医保卡系统数据和公积金系统数据移植到新上线的中国建设银行ODS系统 之中。 本文对利用现有业务系统构建ODS系统进行了有益的尝试，有效的解决了管 理数据库与业务数据库之间的数据整合问题，实现了跨域的数据集成，保证了数 据的时效性和准确性，为上下级的统一调度和企业决策提供了平台。 关键词：I：Tk、操作型数据存储、数据仓库 山东大学硕士学位论文ABSTRACT 山东大学硕士学位论文 ABSTRACT As information technology developed,the information asset contributed more and more power to the core competition ability of the modem enterprises．Accordin哲y, it became more and more important for the CIOs to efficiently deal with data which Was generated from the daily operating····in order to support their employers in the decision．making process．Since Doctor E．F．Codd put forward“relational database’’ model in the year 1970，RD has become a main stream in the data management area． However,this quick．responding business management system has all inherent flow when they facing the thematic．driven data analysis application．Therefore，it would benefit the enterprise’S information management by constructing an operational data store(ODS)upon the existing relational database，which could also become a significant technology instrument in the decision。making-supporting process． This thesis bases on the CCB ODS proj ect which I took part in recently．Started with the instruction to ODS concept and actualizing technology，and deeply discussed the realizing mechanism of the key steps of ETL technology(extracting。 transforming．10ading)．The article in particular introduced the ETL construction and application disposing scheme of CCB ODS system．Further more，as all important part of my iob，I emphasized how to transfer data