史上最强 Kettle 培训教程.pdf

Kettle工具使用 培训教程 目录 ETL 简介 KETTLE 简介 KETTLE 安装和运行 KETTLE 菜单简介 KETTLE 案例讲解 控件介绍 日志介绍 一、ETL 简介 ETL 概念简介 ETL相关的质量特性 ETL 在数据仓库项目中的位置 二、kettle 工具简介 Kettle是一款国外开源的ETL工具， 纯java 编写，可以在Window、 Linux、Unix上运行，数据抽取高效 稳定 Kettle中有两种脚本文件， transformation （转换）和job （作业），transformation完成 针对数据的基础转换，job 则完 成整个工作流的控制。 Kettle 工具的模型架构 kettle 工具的优缺点 优点： 缺点 • 系统开源、免费 • 稳定性差 • 安装方便、图形化安装 • 性能差 • 支持多种数据源 • 缺乏元数据管理 • 支持多种字符集 • 具有简单的权限管理 • 支持各种复杂数据转换 KETTLE 的下载 Kettle可以在 /网站下载 下载kettle压缩包，因kettle为绿色软 件，解压缩到任意本地路径即可 Kettle 运行步骤 双击运行 kettle 文件夹下的 Kettle 文件，出 现 kettle 欢迎界面。 创建资料库(可省略) 创建数据库连接 创建转换 创建Jobs ，进行流程化控制 KETTLE 的使用 进入到Kettle目录，如果Kettle部署在windows环 境下，双击运行spoon.bat文件，出现如下界面 ： Kettle 使用步骤 （1 ）创建转换 大概的来说一般由三步组成 ： 输入 +转换等中间步骤 +输出 （2 ）创建作业 将已经创建好的转换和相关的作业组件串联起来 ， 形成一个整体的任务。 Kettle 的执行顺序 • 作业：分串行执行和并行执行，串行执行是先执行完其中一条线再执 行另一条线，并行是两条线同时执行，同一条线上的两个步聚会先执 行前面的再执行后面的。每个步骤执行结果分两种：true(成 功)/false(失败),根据返回结果可以控制流程走向。  转换：一开始所有步骤同时运行，记录会从最前端的步骤向后传递， 传递到相应步骤则该记录被该步骤作相应处理，处理完成再把记录往 后传递，记录传递分复制和分发两种模式。 KETTLE 的目录介绍 ↂ根目录文件夹介绍： 【Docs】存放Kettle各种语言版本的API文档。 【Launcher 】存放Kettle Spoon加载的一些配置信息。 【Lib 】存放Kettle所使用到的第三方jar 包。比如：数据库驱动包， 如缺少时需要把对应的数据库驱动包放入此文件夹中。 【Libswt 】存放Kettle对应不同平台的相关UI jar包。 【Plugins 】存放Kettle自定义插件时，需要把自定义好的插件打成 jar 放在此目录。 【Pwd 】存放Kettle配置集群时所需要的配置文件与加密文件。 【Samples 】存放Kettle