白皮书-DSG ETLPlus数据实时抽取增强解决方案-Oracle.doc

ETL数据实时抽取增强解决方案 迪思杰（北京）数码技术有限公司 2009-6-2 目录 1 ETL抽取现状 3 1.1 实时ETL抽取改造目标 4 2 DSG ETLPlus解决方案概要 5 2.1 技术要点分析 6 2.2 解决方案优势 6 3 DSG ETLPlus部署方案 8 3.1 部署结构 8 3.2 软硬件环境要求 9 3.3 ETL接口文件说明 9 4 名词术语 13 5 ETL配置文件 14 5.1 （一）、配置文件作用 14 5.2 （二）、配置文件格式说明 14 5.3 （三）、可以支持的转换操作 16 5.4 （四）、配置文件格式实例说明： 17 6 函数 24 6.1 概述 24 6.2 定制函数 24 6.3 数值函数 26 6.4 字符串函数 26 6.5 时间日期处理函数 27 6.6 转换处理函数 29 6.7 杂项函数 33 7 限制条件 35 7.1 （－）、对单行记录进行转换可能造成的数据不一致： 35 7.2 （二）外部查询的限制条件说明 36 ETL抽取现状 现有的ETL产品都是通过sql接口从生产数据库上抽取，或者是由生产数据库的应用开发商根据ETL的要求定期生成接口文件。这是ETL常见的两种接口方式。 在目前的ETL抽取机制中，一般有以下几种限制条件： （1）ETL抽取频率为1天一次 无论是ETL直接从生产数据库中读取数据，还是通过