企业数据开放平台建设思路.docVIP

企业数据开放平台建设思路 ————————————————————————————————　作者： ————————————————————————————————　日期: 企业数据开放平台建设思路 　　 摘要：随着企业信息系统的运营及发展,与外围平台间的数据共享越来越密切,越来越多的企业信息系统将会开放内部核心数据资源,提供给第三方系统接入，便于共同开发数据资源。那么设计一个开放数据提供平台， 把自己的数据资源准确及时的推送给第三方系统尤为迫切。企业数据开放平台的管理系统主要负责系统中各类数据的维护与管理，其中数据同步模块是企业数据开放平台的重要组成部分。　 关键词：企业数据 开放平台 设计 中图分类号:TＰ3 文献标识码:A　文章编号:10０7-９416（2０15）０4－0195－0２ 　 企业数据开放平台是以提供基础数据服务为目的，为下游接入的子系统,提供标准化的接口，并实现与数据开放相关的运营管理；整个系统分为上游数据源管理、下游接入系统管理，鉴权服务，数据同步服务等组成部分。上游数据源管理主要对数据提供方配置数据过滤规则，经过加工转换之后换成开放平台的标准格式数据。下游接入系统管理主要为接入方配置所需的数据模型，配置数据同步规则。鉴权服务主要对下游系统颁发访问令牌,只有通过合法授权才能正常访问数据。数据同步服务是数据开放平台最复杂及最核心的功能模块,完好的同步机制能保证数据同步的完整性、及时性及正确性。 　 1 数据开放平台组成 图1显示了企业数据开放平台功能模块及上下游系统的关系。　 　　从图1可以看到完整数据开放平台的全貌,最顶层的是上游系统，上游系统是数据源，提供基础数据，通过数据适配层的数据转换,把数据存储到数据中心。下游系统通过数据开放平台提供的数据同步服务取得数据资源。由此可见数据适配器及数据同步模块起承上启下的作用，是数据开放平台重点建设的功能模块。 2 数据适配器的设计思路。　 　 由于数据由多个上游系统产生。不同的上游系统提供的硬件设施、网络环境、数据库管理系统,业务支撑系统、业务规范等很有可能都不一样,单一的依赖传统系统软件或工具已不能满足数据同步的需求，迫切需要设计一种企业级的应用解决方案，能够屏蔽复杂的数据结构和业务关系,使不同的网元间数据简单顺畅的流动到企业数据开放平台。数据适配器主要功能就是对上游系统提供统一的数据访问接口,对下直接与企业数据开放平台的数据库交互。 　 2.1 在系统支撑上数据适配器设计要求包括以下几个原则 与平台无关性:无论上游数据库管理系统处于何种环境，都能通过调用平台开放的接口,把数据存储到数据中心。　 　　可扩展性:设计的适配器能满足后续业务的扩展。如:能在不改变现有接口的协议上支持数据中心表字段的增加。 可复用性:设计的适配器除了满足现有的接入的上游系统之外,能满足后续更多接入的上游系统。 　 ２.２ 在业务及管理上数据适配器设计要求包括以下几个原则 　 支持数据规则的配置。系统能灵活支持不同的上游系统不同的数据过滤规则。数据适配器在接收到上游系统的数据时，从配置规则里匹对所需要的数据 ,只有复合规则的数据才进行入库保存。 　支持数据的转换。上游系统通过适配器同步数据时,对于特殊字段的值能够根据配置的转换逻辑进行个性处理,以便兼容到上游系统的特殊业务。　 　支持数据的加工。上流系统同步数据时，对于不完整的数据,适配器能够自动根据配置的数据加工逻辑,对数据进行自动填充处理,使数据达到完整性。 不能随便变更数据中心的业务约束。业务数据的业务规则应以数据中心的为准。当上游系统与数据中心的业务约束有冲突时,数据中心应该把这部分数据进行屏蔽或过滤处理。 　 3 数据同步的设计思路 　数据中心的下游系统,是数据消费者。下游系统通过数据开放平台的同步机制来获取数据，因此设计可靠稳定及时的数据同步机制是数据同步建设的目标。数据同步建设的思路包括以下几点: (1)对于所有下游系统必须经过合法授权才能访问数据。 (２）对于所有下游系统必须要限定访问数据的范围和访问的频率，防止不必要的数据传输及过于频繁的请求访问,造成数据中心服务器压力问题。 　(3）数据中心不允许下游系统反向更新数据,数据的录入及更新都在数据中心的上游系统执行。　 　　３.1　同步机制的选择,以下两种是业界常用的数据同步方案 　 3．1．１ 主动同步的方案 具体来说由数据中心主动发起同步 流程如下 　 （1）数据中心向下游系统发通知,告知下游系统数据有更新; 　(2）下游系统收到通知后向数据更新请求数据； 　（3)数据中心收到请求数据后,向下游系统发送数据； 　　（4）下游系统收到数据后进行入库保存。 ３.1．２