基于中间件异构数据库集成层设计与实现.docVIP

基于中间件异构数据库集成层设计与实现 　　摘要:目前,在生产单位,各个生产部门采用不同的数据库,导致数据格式不统一,资料处理难,严重影响了资源共享和综合应用。将异构数据库集成为统一的数据共享平台是不可回避的问题,针对这一点,提出了基于中间件的异构数据库集成层共享模式。 　　关键词:异构数据库;资源共享;中间件 　　 　　1 异构数据库的研究 　　1.1 异构数据库 　　异构数据库系统即多个数据库系统的集合,每个数据库系统在加入到异构数据库系统之前就已经存在,拥有自己的DMBS,都具有自治性,同时,这些异构的数据库系统通常分布于不同的地理位置,多采用Internet连接。 　　异构数据库是按模式的类型、数据共享的广度及它们支持的访问数据的工具划分的。异构数据库中的模式有: 　　(1)局部模式:局部数据库的DDL表达的组件数据库的模式。 　　(2)全局模式:用共同的DDL所描述,它提供了共享组件数据库统一的视图。 　　1.2 传统异构数据库的集成方法 　　目前,集成异构数据库主要有以下3种解决方法: 　　(1)为各异构数据库建立用户交互接口。 　　(2)利用中间件集成异构数据库。 　　(3)建立联邦数据库系统。 　　 　　2 异构数据库集成层的设计 　　集成层设计流程: 　　为了实现对底层异构数据库复杂性的评比,达到良好的灵活性、可配置性,解析共享数据库层与异构数据库层,并保证异构数据库集成层的高可重用性,设计了集成层流程。 　　(1) 根据各分部的异构数据库结构信息和共享需求,动态地配置数据库共享设置,生成映射配置文件。 　　(2) 由程序根据配置文件自动从异构数据库中抽取设定共享的数据,并将其生成为XML文件表示。 　　(3) 将XML文件包装成为消息,通过Java消息服务(JMS)将其发送到中央服务器上。 　　 (4) 服务器端异步接受消息,还原成XML文件,并根据配置文件,采用XSLT技术实现数据格式转换,生成符合共享数据库格式要求的XML文件。 　　(5) 解析XML文件,利用XML文件数据信息更新中央共享数据库,最终实现异构数据库集成共享和同步刷新。 　　在Java和XML的基础上实现基于中间件技术的异构数据库系统之间数据的转换,可以归结为以下2个步骤: 　　(1) 数据库信息转换到XML文档; 　　 (2) XML文档结构到目的数据库的转换。 　　为了在数据库和XML文档之间进行转换,高效地传递数据,必须在XML文档结构和数据库结构之间建立映射,这也是在整个数据转换过程中最关键的问题。 　　与数据库之间的映射主要有2种方法: 　　(1) 基于模板驱动的映射 　　基于模板驱动的映射是一种浅层映射,以这种模板驱动的映射的方法相当灵活,但是目前的模板驱动只支持从一个关系型数据库转换到XML文档的情况。 　　(2) 基于模型驱动的映射 　　这种方式的缺点是灵活性不如模板驱动方式,但是简单易用。这是因为它是基于具体的数据模型来进行映射的,通常在这种方式下要综合搭配XSL来实现灵活性。 　　 　　3 异构数据库共享平台的实现方法 　　中央共享数据库根据业务需求建立,完全面向上层应用,不考虑底层数据的来源、格式转换等细节问题;所有的与底层相关的复杂问题都由异构数据库集成层来解决。 　　3.1 核心类的主要功能说明 　　(1) DMManager类,封装了根据配置文件和XML文件生成针对不同数据库系统的SQL语句。 　　(2) XMLManager类,主要实现根据配置文件将数据库记录生成XML文件、转换XML文件为SQL语句功能。 　　(3) JmsCommon类,实现根据JMS配置文件建立连接、发送消息等功能。 　　(4) SchedularTask类,根据操作流程组装基础类,在节点数据库段实现集成。 　　(5) Schedular类,监听系统时间,管理SchedularTask实例。 　　(6) Moniter类,包含入口方法,根据同步配置信息实例化Schedular。 　　(7) ImcSynDB组件,监听WebLogic Jms服务器队列,调用基础类,刷新共享数据库。 　　3.2 异构数据库管理系统之间的数据集成 　　异构数据库管理系统之间的数据是不能直接交互的,为了解决这一问题,采用了XML来表示数据评比异构性;同时,各分部的异构数据库与中央共享数据库之间,肯定存在数据结构不一致问题,解决这一点也至关重要,对此,我们充分利用数据库映射配置和XSLT技术来实现数据格式的转换。 　　实现步骤: 　　(1) 通过JDBC连接数据库,获取元数据,提取数据库结构信息。 　　(2) 对异构数据库设定数据库共享配置,然后采用JDOM技术通过