基于归档志的数据同步服务平台研究与应用.docVIP

基于归档日志的数据同步服务平台研究与应用 李功新1刘升1刘金长2杨成月2张翔2 （福建省电力有限公司,中国福州350003） （厦门亿力吉奥信息科技有限公司，屮国厦门361009） 摘要：福建电网构建数据服务平台的H标是通过对基层电网生产数据整合，来提 供省公司一级对电网生产管理所需的数据源，构建稳定可靠的电力业务数据支撑 平台。在整体架构设计上将其划分为三层，其屮数据抽取层通过直接解析Onicle 数据库归档日志，来高速有效的获取原始数据；数据转换层采用基于XML的数 据抽取接口，来屏蔽各基层电网生产数据的差开性；数据集成层通过建立具有福 建电网口身业务特色的数据集成模型，使数据既能保证现有业务需求乂能满足后 期业务扩展需要。该平台的设计方案和技术路线对于电力行业屮相关数据同步系 统的建设具有一定的参考意义。 关键词：数据同步；归档日志；GPMS； CIM模型 1概述 2007年，福建电力在全省各地市级电网部署、安装了电网生产管理系统基 层版（Grid Production Management System, GPMS）,使福建电力输变电生产管理的规 范化、信息化水平上了一个新的台阶。GPMS系统基于GIS理论并结合电力生产 业务加以实现，同时根据业务需求分别在各地市部署了基层版并在省公司部署了 省公司版。省公司GPMS系统业务数据來源是各基层版的业务数据，同时根据 业务需求作相应的转换、集成，主要具有如下三个方面的功能： 1） 基层版与省公司版数据的同步 根据GPMS系统各版本而向的对象不同，省公司版需要抽取、同步、复制 各基层GPMS系统的数据，来为省公司版系统的各项业务提供数据支持。因此, 必须建立一套机制和体系，在确保数据库性能和安全的情况下，让基层公司业务 数据库屮的数据有选择性地在受控的情况下同步到省公司的数据库屮。 2） 业务与负载均衡 在数据同步过程小，需要确保在海量数据的抽取、同步及复制时，现有系统 业务仍然可以顺利开展，不对现有的业务处理造成任何性能上的影响。 3）数据中心的建设 为在半今市场竞争屮保持优势，越来越多的电网公司在建设数据屮心系统， 以便为公司的决策支持系统提供稳定、可靠的数据源。如何为数据屮心提供完整 的数据抽取、转换和装载的解决方案，一直是信息化建设面临的挑战，同时也是 平台建设所需达到的H标。 2平台分析 数据同步服务平台研发的关键在于： 1） 与GPMS系统无缝集成 电力系统本身特点决定了为保证供电的可靠性，电力系统生产环境屮所采用 的软硬件系统必须能够保证7*24小时无间断稳定运行，这就要求在实现数据同 步时所采用的技术实现方案，必须要能够同现有的GPMS系统实现无缝集成。 即要求数据同步服务平台在部署吋不会屮断现有系统业务运行，因为即便是有计 划的业务屮断，也会对电力企业造成巨大的损失，大大降低服务质量和客户满意 度。 据业界估计，80%的停机吋间都源于计划的下线，其屮包括软件系统部署、 升级和硬件迁移等。因此尽量缩短软件系统部署过程所需要的吋间是提高系统连 续运行的关键，因此，如何保证数据同步服务平台同现有GPMS系统的无缝集 成，并尽可能的缩短平台部署时可能造成的业务屮断时问是本项H最关键的环节 之一。 2） 屏蔽数据差异性 GPMS基层版设计Fl标针对的是各个地方局的生产业务。由于地域性的差 界，在描述相同业务丄，也可能会存在数据格式、数据编码丄的不一致，因此在 数据同步过程屮需要对数据差异性进行屏蔽，将其进行统一的转换，保证在省公 司进行数据集成吋具有统一的数据编码格式。 3） 满足业务发展需求 省公司和基层局由于组织定位的不同，即使对于相同的业务，所要求的数据 结构和编码也会不尽相同，因此在数据集成时，要根据相关需要建立起札I应的数据集成模型，来描述相关业务，以便满足省公司层而对于业务数据的需求。同时, 建立的业务模型还需要满足后期业务发展要求，并可方便灵活地进行修改和扩 充。 基于以上三个关键出发点，在平台架构的设计上采用分层设计思想，将其划 分为三层（图1）。其屮，数据抽取层负责从基层版屮获取基础数据；数据转换 层负责屏蔽各基层版数据间的差异性；在数据集成层屮增加省公司相关业务需 求，并对各呈层版数据进行集成转换以满足业务需求。 与GPMS数据相关业务应用应用系统皑网综合防灾减灾系统华东电网公司 企业级信息系统营销管理（电能屋 管理、95598）电网生产管理糸统 （省公司版〉N家电网公诃总部 生产管理系统宙电信息综合分析［ 与GPMS数据相关业务应用 应用系统 皑网综合防灾减灾 系统 华东电网公司 企业级信息系统 营销管理（电能屋 管理、95598） 电网生产管理糸统 （省公司版〉 N家电网公诃总部 生产管理系统 宙电信息综合分析［ ［曲成熟套装软件 「智能移动