基于开源代码的ETL工具的实现.pdfVIP

SoftwareandAlgorithms 基于开源代码的ETL工具的实现 汪 洋，韩 宁 (中国软件与技术服务股份有限公司，北京 100081) 摘 要：在企业数据愈加庞大的今天，大批量数据 交换也越加频繁 ，ETL是数据处理 的主要技术手段 ，但极少有 ETL工具能够 兼顾 自动调度及跨 网段交换。在开源ETL工具Kettle的基础上，设计 实现能够定制触发规则、根据调度周期 自主运行交换作 业的数据交换工具GoData，该工具支持跨节点跨 网段的数据交换作业，同时具有节点监控及错误作业预警和消息推送功能， 支持集群和分布式部署。该工具极大地满足 了企业对数据 交换业务的需求，在企业合理和充分利用现有数据 资源方面发挥 作用 。 关键词 ：ETL；Kettle；GoData；跨 网段数据交换 ；自动触发 中图分类号：TN919 文献标识码 ：A DOI：10．19358／j．issn．1674—7720．2016．24．006 引用格式 ：汪洋，韩宁．基于开源代码 的ETL工具