ETL设计说明书书.doc

ETL设计说明书 Author: Zhang Jian Customer: *** 目录 1. 概述 5 2. ETL开发策略 7 3. ETL系统架构设计 8 3.1 ETL整体框架 8 3.2 ETL系统逻辑架构 8 3.2.1 ETL系统的备份和恢复 9 4. ETL应用框架设计 10 4.1 ETL应用架构逻辑图 10 4.2 ETL模式 11 4.3 数据抽取(Extract)和数据变换(Convert) 11 4.3.1 数据抽取（Extract） 11 4.3.2 数据变换（Convert） 11 4.3.3 数据分割（Split） 12 4.4 数据转换(Transform) 12 4.4.1 字段合并与拆分 12 4.4.2 赋缺省值 12 4.4.3 数据排序（Sort） 12 4.4.4 数据翻译(Lookup) 12 4.4.5 数据合并(Merge) 13 4.4.6 数据聚合(Aggregate) 13 4.4.7 文件比较(File Compare) 13 4.4.8 其他复杂计算 13 4.5 数据加载(Load) 13 4.5.1 Pre-Load 13 4.5.2 Load 13 4.5.3 Post-Load 14 4.6 ETL进程和进程调度 14 4.7 管理功能（Management Interface） 14 4.8 初始数据、历史数