SQL Server Integration Services 架构概观.pptVIP

SQL Server Integration Services 架構概觀 胡百敬 精誠公司恆逸資訊 大綱 概覽 Business Intelligence Development Studio 與設計 SSIS 封裝的各種流程 封裝設計的整體功能 封裝的部署與執行 SQL Server Integration Services 是什麼？ 全新的 SQL Server 商業智慧應用程式 Data Transformation Services 的接續版本 高效能的資料整合平台 全新用 .NET 撰寫的架構，更豐富的功能 完善的資料檢視、單步除錯與錯誤處理 透過 pipeline 可以更豐富地加值資料，且全部在記憶體內完成，不需要中介資料表 以封裝(Package)為執行單位，而非專案(Project) SSIS 與 DTS 的差異概觀 將資料流程與工作流程分開 以更豐富，更細緻的資料流程工作(Data Flow Task)取代 DTS 的資料轉換工作 以容器工作提供迴圈、執行順序與交易管理 以變數搭配 SSIS Expression 取代 DTS 的動態屬性工作 封裝改以 XML 的格式存放在 SQL Server 或檔案系統上，更方便做 Source Control 可以透過 DTS Migration Wizard 將舊的封裝轉換到新的 SSIS SSIS 架構 提供新的資料倉儲處理架構(1/2) 提供新的資料倉儲處理架構(2/2) 大綱 概覽 Business Intelligence Development Studio 與設計 SSIS 封裝的各種流程 封裝設計的整體功能 封裝的部署與執行 SSIS 管線(Plumbing)… 工作流程 流程導向 前置條件(成功，失敗，或完成) 前置條件可以做 AND 和 OR 等布林運算 從環境輸入參數 File System Task、Execute SQL Task、Send Mail Task、Data Flow Task… 資料流程 特殊的工作流程：Data Flow Task 資料處理導向，在記憶體中，以管線流程的概念(pipeline)處理資料 建立或使用資料紀錄 可以觀察資料變化的過程 Source Adapter、Transform、Destination Adapter 事件處理流程 經由事件觸發的特殊流程 (例如：OnError、OnPostExecute) 階層的架構 可以簡單地寄發一封 e-mail 或是複雜地執行另外一段 dataflow task 以處理錯誤的資料紀錄 自訂的 components 從基礎類別自動繼承相關的事件 (OnError, OnWarning…) Component 的建立者可以自訂他的事件(例如：OnFTPFileFinishedCopy) 大綱 概覽 Business Intelligence Development Studio 與設計 SSIS 封裝的各種流程 封裝設計的整體功能 封裝的部署與執行 變數 系統提供的變數：如 MachineName、StartName、ErrorDescription…等等 使用者自定變數，定義 Namespace Scope 資料型態 初始值 可以在工作、程式碼、資料轉換將產生的資料集…將值、物件儲存在變數中 封裝除錯 設計時期 若發生設定錯誤，自動提供錯誤提示 檢視 XML 原始碼 (可提供搜尋，但不要編輯) 監控執行 編輯中斷點 使用 Watch Window 測試和除錯 停用 / 啟用某些工作 ForceExecutionResult 強制執行結果為：Success、Failure、Completion 會影響前置條件 交易管理 讓多個工作可以一起成功、失敗 多個資料來源可以一致地修改資料 連線到的資料來源需要支援分散式交易 交易屬性設定在 Container 上 Require、Supported、NotSupported 透過不同 Container 對交易屬性的設定，可以建立參予一同執行的交易，或是分開不同的交易。 執行紀錄 支援多種記錄提供者 文字檔、SQL Server Profiler、寫到 SQL Server 資料庫內 sysdtslog90 資料表、Windows 事件、XML 檔案 透過 LoggingMode 屬性，設定各工作是否可以獨立設定記錄的事件 某些工作有特有的記錄事件 如指令碼工作的 ScriptTaskLogEntry 大綱 概覽 Business Intelligence Development Studio 與設計 SSIS 封裝 封裝設計的整體功能 封裝的部署與執行 SSIS 生命週期相關的工具 設計 SSIS Pac