数据抽取转换和装载课件.pptVIP

第三讲数据抽取、转换和装载

数据抽取、转换和装载?§§§§§§

?§ETL概览§§§§

ETL概览?§§§§

1.最重要和最具有挑战性?ETL功能具有挑战性，是因为源系统的性质§§§§§§§

2.耗时而且费劲§§???

3.ETL的需求和步骤事实表的ETL维度表的ETL为所有的数据装载编写规程组织数据缓存区域和检测工具为聚集表制定计划决定数据转换和清洗规则建立全面的数据抽取规则准备从源到目标数据元素的的数据映像关系决定所有的数据源，包括内部和外部决定数据仓库中需要的所有的目标数据

ETL过程涉及的各个方面组合1.2.分成读取读取3.4.细节5.6.7.聚集格式转换数值改变8.

4.关键因素????§§??

?§§数据抽取§§§

二、数据抽取??§§§§§§

数据抽取：1.数据源确认§§§??

数据源目标数据源确认过程产品数据事实表维度客户运输渠道数据部署数据时间数据订单量度

数据抽取:2.数据抽取技术??§?§?§??§

数据抽取????§§

??§§??

源数据库交易日志文件源数据源操作型系统触发程序选择1：通过交易日志捕获选择2：从源系统中在数据库触发器中捕获输出触发抽取文件程序文件选择3：在源应用程序中捕获立即型数据抽取：可选方法

数据抽取?§???§§????

数据抽取?§§?????

数据抽取?ü§ü???ü

?§§§§§§

?§§§数据转换§§

数据转换??§§§§§

数据转换§§§§§

数据转换1.2.3.4.5.6.7.8.9.10.

数据转换§§?§§?§

数据转换§???

数据转换§??§§§§§§§§§

?§§§§数据装载§

数据装载?§§§§§

数据装载?§§§

Chapter12数据抽取、转换和装载?§§§§§ETL总结