浅析金融报表系统数据集成问题.docVIP

浅析金融报表系统数据集成问题 　　摘要 本文主要主要介绍了在金融报表系统中的数据集成模块的设计及实现。其中数据集成模块中,采用了XML作为统一数据格式,然后针对各种不同数据源提供不同的专用接口,从而将异构数据源进行集成。对各种当今的异构数据集成模式进行了分析探讨。 　　关键词 金融报表;数据集成;系统设计 　　中图分类号TP39 文献标识码A 文章编号 1674-6708(2010)24-0227-02 　　 　　金融报表系统的一个重要目标是能够集成已有系统的数据,这也是整合各个分散孤立系统所面临的一个重要问题。本文在研究各种异构数据集成的基础上,选择基于XML的数据集成方案,下面对该方案的设计及实现进行详细的说明。 　　1 实现方案 　　在该系统中负责集成数据任务的是数据生成器模块,它将从异构数据源中提取和生成统一数据格式的报表数据。为了能够从不同数据源中进行获取数据,数据生成器需要进行异构数据源的统一处理。集成异构数据源的方法一般有两种。第一种是将原有的数据移植到新的数据管理系统中来,为了集成不同类型的数据,必须将一些非传统的数据类型转化成新的数据类型。第二种方法是利用中间件集成异构数据库,中间件位于异构数据库系统(数据层)和应用程序(应用层)之间,向下协调各数据库系统,向上为访问集成数据的应用提供统一数据模式和数据访问的通用接口。各数据库的应用仍然完成它们的任务,中间件系统则主要集中为异构数据源提供一个高层次检索服务。显然,中间件系统模式是实现异构数据集成较理想的解决方案[1]。 　　实现数据抽取的关键是从统一的XML数据中进行查询和统计以得到需要的报表数据。数据生成器是在处理报表之前将来自不同数据源的数据统一转换为一致的XML格式数据。当数据被转换为统一的数据格式后,数据在各个模块之间就可以方便地进行交换,这使得所有模块对数据的处理都能够以统一的方式进行。我们可以使用J2EE架构中数据表示和交换功能的EJB(Enterprise JavaBean,业务逻辑代码)组建中持久化服务的一部分,XML文件可以容易地读取到一个对象模型中。 　　2 数据生成器的架构 　　数据生成器的架构分为3层,如图1所示。 　　其中数据抽取层该层负责提供各种来自不同数据源的数据,如数据库、已有的报表文件和其它文件数据。集成层该层完成将不同格式的数据与XML数据模型之间的转换。它将数据先存储到一个集成模式的存储结构中,然后完成目标格式与原有格式之间的映射关系。此外,它还提供对数据的各种查询操作。上层应用层该层主要是对集成层提供的接口进行封装,以便于对数据的各种处理操作。它提供一个统一的数据视图来查看数据。 　　3 数据抽取层 　　数据抽取层处于系统的最低层,是系统的数据提供者,主要功能是提取和集成分布在多个异构数据源(数据库,知识库及构件库)上的信息。这一层采用 Wrapper(包装器)技术实现将一个从中介层得到的查询,翻译成能够在经过封装的数据源上执行的操作,将查询结果抽取并打包到一个XML文档,最后将该文档返回给集成层。可以考虑使用Wrapper组件,即: 　　Wrapper组件由两部分组成:Wrapper生成器和Wrapper实例(简称Wrapper)。Wrapper生成器用于为查询某个确定的站点或站点集合,构建Wrapper的输入是用一种Wrapper规范语言书写的规格说明。规格说明必须能够表达以下内容:数据源接口、数据模型、从用户到数据源本地操作的查询映射、数据源的查询能力。通常为一个数据源生成一个有效的Wrapper所必须的信息是使用DTD来描述的。Wrapper生成器的输出是一个可以执行的Wrapper实例,该Wrapper能够接受由Wrapper规范语言定义的查询。我们采用关系Wrapper能决定关系模型和DOM(Document Object Model,域对象模型)对象数据模型之间的映射。因此,可以采用DTD(Document Type Definition,文档类型定义)来描述数据库中关系表的数据模式。 　　4 集成层 　　集成层最重要的问题就是数据的转换问题,将来自不同数据源的各种数据转换成集成系统能进一步处理的统一格式。 　　4.1 集成层的专用接口 　　专用接口主要完成XML数据模型与数据源的双向转换。它用XML描述集成数据,用XML文档和格式文件DTD表示集成模式与数据源之间的映射。XML数据模型与数据库的转换主要体现在XML的DTD和数据库数据模型的相互转换。从DTD转换到数据库模型的原理如下: 　　1)从DTD生成一个关系模式,并在此基础上建立关系数据库; 　　2)对DTD中的每一个元素,产生关系数据库的一个表和一个主键列; 　　3)对每一个有混合内容的元素,产生一个独