etl方辉法介绍.pptVIP

中国人民保险公司保险数据模型及业务标准化 | 保密 IBM Confidential 中国人民保险公司保险数据模型及业务标准化– 数据模型及业绩指标和风险测算分析 – ETL方法介绍 2004年4月15日 内容 ETL基本概念 ETL过程讲解 PICC ETL总体架构 PICC ETL开发方法 ETL基本概念－－主要目的 将源系统数据经过抽取／转换过程，最终装载到目标系统 将针对日常业务操作的数据转化为针对数据仓库而存储的决策支持型数据 ETL基本概念－－术语解释 ETL基本概念－－数据仓库中的位置 ETL基本概念－－数据质量 ETL基本概念－－数据质量原因 业务系统不同时期数据模型不一致 业务系统不同时期业务过程有变化 各个源系统之间相关信息不一致 遗留系统和新业务、管理系统数据集成不完备带来的不一致性 源系统缺少输入验证过程，不能阻止非法格式的数据进入系统 可以验证但不能改正数据，验证程序不能发现格式正确但内容不正确的错误 源系统不受控制的更改，而这种更改不能及时的传播到受影响的系统 数据由多个交叉的访问界面，难以统一管理数据质量问题 缺少参照完整性检查低劣的源系统设计 数据转换错误，比如ETL过程错误或数据迁移过程的错误 源系统与数据仓库系统的数据组织方式完全不同 ETL基本概念－－数据转换 ETL过程讲解－－逻辑架构 ETL过