ODI教程.docVIP

ODI教程 ODI-- Oracle Data Integrator 是一个全面的数据集成平台，它能满足所有数据集成要求，涉及领域包括高容量、高性能批处理、事件驱动的少量传送集成过程以及支持 SOA 的数据服务,在数据加载过程中也提供了数据质量检查,监控等功能,使数据更符合业务要求. ??????? 提到ETL大家都很熟悉,数据提取,转换,加载的产品.我们平时自己也会开发一些类似ETL的小工具,把不同数据源汇总到一个目标数据源.但如果数据源很多,表也很多的话,这样的工作就是比较复杂的过程,我们需要做很多定制开发工作.而数据库之间的数据转换接口又很难满足我们对数据质量的要求,数据传输过程中的性能问题也会经常让人头疼. ?????? ODI的前身是Sunopsis公司的数据集成产品: ?????? 2006年10月9日 甲骨文宣布收购法国数据集成软件公司 Sunopsis SA ?????? Sunopsis 公司产品用于把数据从不同来源例如数据库以及企业资源计划(ERP)等应用整合到一个目标地方,供数据分析和其他任务使用. ?????? Sunopsis总部在法国,成立1998年,客户有环球唱片集团德国公司,道达尔石油集团意大利子公司等. ??????? 从技术角度来看看ODI特点: ??????? 1.ODI本身是一种开放的价构,支持几乎所有目前流行的关系数据库.而且它是Java开发的产品,可以跨windows,unix平台,同时还能与中间件融合,可以融合到整个IT架构中. ???????? 2.ODI推出ELT架构,与传统的ETL架构相比,少了中间的转换引擎.很多ETL产品都需要安装自己的转换引擎,而ODI直接调用源数据或目标数据服务器的数据库端.这样,实际数据处理,相当于数据库与数据库之间的连接处理,而数据库服务器处理效率远高于单独一台转换引擎做转换,因为它始终保持数据在数据库中处理. ???????? 3.ODI有自己的知识模块,这些知识模块可以根据需求进行选择,而且这些知识模块支持开放式的设计,可以用自己熟悉的数据库语言或者Java语言来实现,可以更好地设计数据库流和业务要求.ODI可以结合数据库的优化模式,可以通过知识模型设计自己的知识模块,使处理数据更快. ?????????4.ODI 可以把数据发布成服务与SOA进行完美结合,使ODI可以结合到业务流程当中,通过Web服务的方式进行数据实时地查看和修改. ODI安装配置时候,总是有逻辑架构、上下文、物理架构，还有就是Flow. 还有一个就是被问的最多的，Staging Area是不是相当于ETL服务器的Transformation. 个人理解： Flow: 如果用Flow Control Option进行集成控制，必须选择update key. update key 是目标数据源中一个可以唯一识别一行的列集合。Update Key可以用来执行更新和流控制。ITPUB个人空间*tgz2sv:I6_jq
yE它可能是定义在目标数据源中的Primary/Unique Keys。在interface中定义。ITPUB个人空间@ q%|nOZ8X如果目标数据源有主键，在关系图（Diagram)中选择目标数据源，然后选择更新键。 Flow: 它就是数据从源数据源到目标数据源的路径。这个流检查数据怎样被提取、转换、集成到目标源。 Staging Area:是一个独立、专有的在一个关系数据库中用来为ODI创建临时对象的区域。默认它在目标数据库中，如果目标数据源不时一个RDBMS，那么必须把Staging Area定义到一个RDBMS。ITPUB个人空间}(zVV+Z$}0N9zA+hStaging Area在Interface的Definition中定义。 z:c`i.}m DI 逻辑架构: 一个物理模式(physical schema)由一个owner schema和一个work schema组成，work schema主要用于一些临时表等对象，考虑单独创建用户维护这个对象． 物理架构: 一个逻辑模式(logical schema)是物理模式的别名，防止用户更改数据库服务器IP地址,用户名，数据库服务器密码等信息．可以理解为同义词，避免用户在使用过程中加入数据库dblink.物理模式的修改，不影响逻辑模式． i5f _kc\6下文： 物理模式信息的修改不影响逻辑模式的引用，但如果物理模式数据库服务器的连接信息改变，就比较麻烦．上下文的出现就是允许逻辑模式通过上下文连接多个物理模式，避免因为连接信息改变而重新定义．ITPUB个人空间A(H