(kettle_步骤解释.docxVIP

kettle_步骤解释 1.Transform转换 Dummy Plugin空操作这是一个空的测试步骤 2.Input导入数据 ESRI Shapefile Reader读取矢量数据从SHP文件中读取图形数据和属性数据 S3 CSV InputCSV文件输入将读取的CSV文件数据并行存储到Amazon中 3.输入 Access Input导入数据库文件从微软数据库文件中读取数据 CSV file input导入CSV文件导入简单的CSV文件 Cube 输入导入Cube文件从一个cube文件中读取数据 Excel 输入导入Excel文件从微软的Excel文件中读取数据兼容ExcelFixed file input导入文本文件导入文本文件 Generate random value生成随机数随机数生成器 Get file Names获得文件名称从系统中获得文件并将其发送到下一步 Get files Rows Count获取文件行数获取文件行数 Get SubFolder names获取子文件夹名称读取一个主文件夹获取所有的子文件 Get data from XML从xml文件中获取数据使用XPath路径读取xml文件这个步骤也允许你解析以前字段定义的xml文件 LDAP Input使用LDAP协议读取远程数据利用LDAP协议连接远程主机读取数据 LDIF Input导入LDIF文件从LDIF文件中读取数据 Mondrian Input导入MDX文件用MDX查询语句执行和审核数据分析LDAP服务器 Property Input导入属性文件从属性文件中读入键值对 RSS Input导入RSS订阅读取RSS订阅信息SalesForce Input导入salesforce服务读取slaseforce模块服务并将其转换成数据并把这些数据写入多个输出流XBase输入导入DBF文件从一个XBase类型的DBF文件中读取记录 .输出 Access Output导出数据将记录存储到微软的数据库表中 Cube输出导出Cube文件将数据写入Cube文件中 Excel Output导出Excel文件存储记录到Excel格式化文档中 Properties Output导出属性信息将数据写入属性文件 RSS Output导出RSS订阅信息读RSS订阅信息流 SQL File Output导出SQL文件 SQL INSERT语句输出到文件 Synchronize after merge合并后同步信息根据某个字段值的条件插入删除更新数据库表 5.转换 Add XML添加xml文件内容将几个字段编码写入xml文件 Add a checksum添加checksum列为每个输入行添加checksum列校验和 Closure Generator结束操作允许利用ID的父子关系生成一个结束表 Number range编码范围创建数字字段的范围 Replace in string替换字符串用另一个单词替换当前的所以得字符串 Row Normaliser行转换数据恢复从透视表中还原数据到事实表通过指定维度字段及其分类值度量字段最终还原出事实表数据 Split field to rows拆分字段按指定分隔符拆分字段 Strings cut裁剪字符串裁剪字符串生成子串 Unique rows HashSet除去重复行去掉输入流中的重复行在使用该节点前要先排序否则只能删除连续的重复行。 XSL TransformationXSL转换实现XML到XSL的转换值映射值映射实现对特定字段总一个值到另一值得映射行扁平化行扁平化将输入流出现的结果字段进行扁平化处理指定需处理的字段和扃平化后的新字段将其它字段做为组合Key进行扃平化处理行转列行转列通过检索键值对拆分行分配他们到新的字段中。同Normaliser过程相反 5.utility应用 Clone row复制行根据需要可以多次复制行 Delay row延迟行对输入字段延迟一定时间后输出 Execute a process执行一个进程执行一个进程然后返回一个结果 If field value is null如果字段为空如果字段为空为它设置一个常数 Mail邮递发送一个邮件 Metadata structure of stream数据流结构读取传入数据流 Null if...设置空字符如果某个字符值为指定的值就将它设置为null Process files文件操作通过输入文件名对文件进行删除拷贝转移操作 Write to log写日志向日志文件中写入数据 6. Flow Abort中止中止一个转变 Append streams追加流追加一个有序流 Blocking Step阻塞阻塞到所有的输入行都执行完 Detect em