基于KETTLE的数据集成研究.PDFVIP

第25卷 第4期 计 算机 技 术 与发 展 Vol.25 No.4 2015年4月 COMPUTERTECHNOLOGY AND DEVELOPMENT Apr. 2015 基于KETTLE 的数据集成研究 崔有文,周金海 (南京中医药大学信息技术学院,江苏 南京 210023) 摘 要:为了实现对企业业务系统基础数据按需地高性能集成,优化数据质量,对数据进行抽取、转换、加载,形成分析型 数据。 根据数据的异构性、半结构以及非结构性等特点,基于KETTLE构建ETL过程模型,从多数据源抽取、增量数据捕 获等方面分析了ETL关键技术,制定了面向中药企业的数据集成解决方案。 利用KETTLE 的ETL数据处理技术,快速、高 效地实现数据集成,为企业的商业智能分析奠定了数据基础,提升企业决策水平。 关键词:数据集成;数据抽取;转换和加载;KETTLE;数据仓库 中图分类号:TP391 文献标识码:A 文章编号:1673-629X(2015)04-0153-05 doi:10.3969/j.issn.1673-629X.2015.04.035 Research on Data Integration Based on KETTLE CUI You-wen,ZHOU Jin-hai (Institute of Information Technology,Nanjing University of Chinese Medicine, Nanjing210023,China) Abstract:In order to integrate the base data of enterprise frequently with high performance and optimize the data quality,extract,trans- form and load the data to form the analytical data.According to the characteristics of the heterogeneous,semi-structured and un-struc- tured data,the ETL model isbuiltbasedonKETTLEandseveralETLkeytechnologiesareanalyzedfrommultiplesourcedataextraction and the incrementaldatacapture,developeddataintegration solutionforChinesemedicineenterprise.AdoptingETLdataprocessingtech- nology ofKETTLEwillrealizethedataintegrationquicklyandefficiently,layingthefoundationforbusinessintelligenceanalysisandim- proving decision level of enterprise. Key words:data integration;data extraction;transformation-loading;KETTLE;data warehouse [2-3] 0 引 言 问题 。 数据集成领域中的ETL有其自身的一些特 随着信息技术和数据库技术的应用与发展以及企