基于OLAP集成数据仓库技术在EMS中应用.docVIP

基于OLAP集成数据仓库技术在EMS中应用 　　摘要:随着电力行业的高速发展,EMS在电力生产管理过程中所需要处理的数据容量迅速膨胀。电力企业亟待建立一套高效准确的信息分析系统。本文提出一种融合各个异构数据源的集成数据仓库设计方案并在此基础上讨论了OLAP的概念、属性及其在EMS支撑平台上的应用。其应用领域包括系统状态监控、经济运行和故障模式分析等方面。 　　关键词:能量管理系统 数据仓库 联机分析处理 数据挖掘 　　 　　引言 　　 随着电力系统规模的日益庞大和电网商业化运营工作的深入开展, 能量管理系统(EMS),作为电力企业实施管理、控制操作的支撑软件平台,必须有效地解决好生产管理过程中产生的大量数据信息处理问题。传统数据库系统的查询检索机制远远不能满足实际的需要。新一代的EMS产品普遍采用了最新的计算机网络通信技术和集成数据仓库技术,以期实现安全、高效、灵活的管控功能。近年来,国际上数据处理领域涌现出的各种可视化数据流处理技术在电力工业领域得到了越来越广泛的关注。其中,支持在线事务处理的OLAP(online analytical processing)就是这一技术群体中有着鲜明特色的一种应用技术,它使得运行人员和管理人员能够方便地多角度地对原始数据进行转化提取,对数据本质内容进行快速、深入地交互操作。 　　 　　1 电力信息模型构建 　　 电力系统是一个复杂的网状体系结构,由数量繁多的电力对象实体构成,大到整个电网、发电厂、变电站,小到变压器、开关、电容器。各个对象类之间通常存在着复杂的相关性,如概括关系、关联关系和聚合关系等。随着SCADA、EMS、DMS等应用领域中集成系统的开发和维护的复杂性日益提高,基于电力信息模型的集成数据仓库技术越来越受到人们的重视。面向对象的电力系统信息模型构建是整个认知管理体系的基础。电力系统的信息建模对象不仅包括网络结构、组成实体,而且还应体现出实体间的内在关联模型和各种信息流管理模型。主要包含以下方面:(1)系统结构(主要是电网的拓扑结构)和组成元部件状态、属性、动作特性。(2)电网、设备实时运行状态变量,包括各个元件、各个网络、各个节点(可以是非物理的虚拟节点)的打标??量值以及无法直接量测得到的估计状态值。(3)系统参数、定值管理。(4)故障、报警信息管理。包括录波远传信息、各个设备在线监测系统的报警信息。(5)经济决策、市场运营中的交易、管理信息。 　　2 集成数据仓库设计 　　 数据仓库是面向主题的,集成的,时变的和非易失的有组织的数据集合[1]。它支持管理和决策过程。数据仓库最根本的特点是物理地存放数据,而且这些数据并非是最新的、专有的,而是来源于其它的数据库。数据仓库的建立并不是要取代原有的数据库,而是建立一个较全面、完善的信息应用平台,用于支持高层决策分析。它是数据库技术的一种新的应用。集成数据仓库的设计应满足以下几点要求: 　　 (1)支持面向主题和对象的多层次分析。电力信息模型描述的对象实体不仅自身结构复杂,而且对象间存在着复杂的交互关系。可以按照事务和处理任务建立相关主题。通过公共键码进行各种综合级、细节级和多粒度的数据操作。 　　 (2)分布式体系结构和标准化访问机制。用于集成的数据库之间往往是异构的,数据仓中的数据是对原有的分散的数据库数据抽取、清理、加工、汇总而得。必须消除数据中的不一致性,提供标准的SQL访问语言接口,实现异构数据库之间的开放式互联。 　　 (3)良好的稳定性和较高的安全性。电力过程信息通常需要实时更新,而查询操作需要调用大量历史信息。数据仓库应对关键数据安排带有时间元的定期刷新和加载操作。同时,应提供数据库的快速恢复和自启动能力、数据的快速拷贝备份以及数据访问的授权功能,以满足电力系统安全可靠运行的要求。 　　 (4)灵活的配置方式和简便的维护性能。用户可按需进行数据类型、数据范围并可自定义事件触发功能。 　　 考虑到商用关系型数据库的强大的数据访问、操作管理功能,同时满足面向电力系统对象的实时响应性,新一代的EMS数据仓库通常采用商用数据库如SYBASE、ORACLE、SYQSERVER等和基于内存映射的实时数据库的有机集成。充分发挥商用库的功能和实时库的效率。图2为EMS的集成数据仓库系统框图。集成数据仓库的建立成为实现数据的统一分发和访问共享的集散中心。它为EMS的各项高级应用如潮流分布、故障计算、无功优化以及经济运行等功能模块提供了便利的数据支持。同时也使得管理人员进行OLAP(在线分析处理)操作、深度数据挖掘和内在知识发现成为可能。 　　3 OLAP技术 　　3.1 OLAP概念 　　 OLAP(的概念最早是由关系数据库之父E.F.Codd于1993年提出的[2]。可以把OLAP定义为“关