Lookup的几种缓存模式讲义.docx

微软BI 之SSIS 系列 - Lookup 组件的使用与它的几种缓存模式 - Full Cache, Partial Cache, NO Cache2013-09-04 20:28 by BIWORK, 1496 阅读, 13 评论, 收藏, 编辑开篇介绍先简单的演示一下使用 Lookup 组件实现一个简单示例 - 从数据源表 A 中导出数据到目标数据表 B，如果 A 数据在 B 中不存在就插入新数据到B，如果存在就更新B 和 A 表数据保持统一。随后再来解释在这个过程中使用到的一些术语，以及分析一下 Lookup 中出现的几种缓存模式，各自的特点以及常用的场合。案例讲解两张表，一张是目标表DEMO_LK_Customer，一张是DEMO_LK_LegacyCustomer? 旧系统表。我们可以理解我们这个示例要实现的目标是DEMO_LK_Customer表的数据要和DEMO_LK_LegacyCustomer?实现同步，保持一致。USE BIWORK_SSISGO-- Look up demo tableIFOBJECT_ID(DEMO_LK_Customer,U) ISNOTNULLDROPTABLEDEMO_LK_CustomerGOIFOBJECT_ID(DEMO_LK_LegacyCustomer,U) ISNOTNULLDROPTABLEDEMO_LK_LegacyCustomerGOCREATETABLEDEMO_LK_Customer(CustomerIDINTPRIMARYKEY, CustomerCompanyNVARCHAR(255), CustomerNameNVARCHAR(20),CustomerAddressNVARCHAR(255))CREATETABLEDEMO_LK_LegacyCustomer(CustomerIDINTPRIMARYKEY, CustomerCompanyNVARCHAR(255), ContactNameNVARCHAR(20),ContactTitleNVARCHAR(50),CustomerAddressNVARCHAR(255))INSERTINTODEMO_LK_CustomerVALUES(1,HFBZG,Allen,Michael,Obere Str. 0123),(2,MLTDN,Hassall, Mark,Avda. de la Constitución 5678),(3,KBUDE,Peoples, John,Mataderos 1000)INSERTINTODEMO_LK_LegacyCustomerVALUES(1,NRZBB,Allen,Michael,Sales Representative,Obere Str. 0123),(2,MLTDN,Hassall, Mark,Owner,Avda. de la Constitución 5678),(3,KBUDE,Peoples, John,Owner,Mataderos 7890),(4,HFBZG,Arndt, Torsten,Sales Representative,7890 Hanover Sq.),(5,HGVLZ,Higginbotham, Tom,Order Administrator,Berguvsv?gen 5678)SELECT*FROMDEMO_LK_CustomerSELECT*FROMDEMO_LK_LegacyCustomer--UPDATE DEMO_LK_Customer SET CustomerName= ?, CustomerCompany = ?, CustomerAddress = ? WHERE CustomerID= ?--UPDATE DEMO_LK_Customer SET CustomerName= ? WHERE CustomerID= ?--UPDATE DEMO_LK_Customer SET CustomerAddress= ? WHERE CustomerID= ?在测试数据中，我们认为两张表的 ID 都是不变的唯一的，第1条数据和第3条数据不一致，第4条和第5条数据在目标表中不存在。先看一下实现这个例子的 SSIS Package 结构，最外面的是一个数据流DF_Lookup。在数据流中，数据源OLE_SRC_LegacyCustomer在这个例子中使用的是 SQL Server 数据库表，但是这个数据源也可以是文本文件，Excel 或者其它数据库的表或者查询的结果集。这个数据源相对于 Lookup 组件LKP_Customer来说是 Lookup 组件的输入项。LKP_Customer之后有两个分支 - 匹配和不匹配分支，做的