对采油厂数据仓库体系结构与探讨.docVIP

对采油厂数据仓库体系结构的探讨 游莉 张新政 卢友娥 王冰 （新疆油田分公司采油二厂） 摘 要：本文从数据仓库的定义和结构探讨了采油厂建立数据仓库的体系结构，结合采油厂信息建设现状阐述了数据仓库建设中要完成的工作及其重要意义，并介绍了数据仓库的实施过程。 关键词：采油厂；数据仓库；数据集成；系统集成；数据挖掘 采油厂信息系统经过多年建设，已经积累了大量的油气田生产业务数据。企业内的各级人员都希望能够快速、方便有效地从这些数据资源中挖掘获取有用的信息，决策者希望能够利用现有数据指导油田的生产经营决策和发掘企业的管理潜力。这类业务的特点是需要大量的历史数据和汇总数据，他们不需要对数据进行修改，而是使用大量的随机查询 ，正是此类应用的存在，引发了建立数据仓库的迫切需求。因此，我们采油厂的信息系统必须以数据库为核心，在统一的数据库平台下，建立完善、合理的数据结构，组织油田生产管理所需的原始数据，利用地质勘探、石油工程、钻井开采和计算机新技术，开发适合油田企业应用的各种功能处理软件，以满足油田不同层次和任务的管理与决策需求并使其最大限度地发挥效益。 1 数据仓库概念和结构 1．1数据仓库概念 世所公认的数据仓库之父 William H. Inmon首先定义了数据仓库的概念，他将数据仓库定义为“一个面向主题的、集成的、随时间变化的（或历史的） 、非易失性(稳定的或不可更新的)数据的集合，用于支持管理层的决策过程”。 随着时间的推移，数据仓库这一术语逐渐为世人所接受。简单地说，数据仓库是一种体系结构，一种独立存在的不影响其他已经运行的业务系统的语义一致的数据仓储，可以满足不同的数据存取、文档报告的需要；数据仓库是一个不断发展的过程，将多个异质的原始数据融合在一起，用于支持结构化的在线查询、分析报告和决策支持。 Internet/ Intranet 技术的发展极大地推动了数仓库应用的实施进程 ,使得我们运用数据仓库技术成为可能。首先 ,数据仓库可以以很低的成本分布在油田范围内的计算机网络上，从而减少了跨地区、跨作业区以及跨部门的数据复制量，即解决了油田开采、管理数据的重复存储问题。其次，可以对油田开发过程中得到的数据进行各种复杂而有效的分析，然后以统一的格式提交给终端用户。 1. 2 　数据仓库的结构 数据仓库是数据库技术的一种新的应用 ,它是用数据库管理系统来管理其中的数据 ,是数据存储的一种组织形式 ,是在原有关系型数据库基础上发展形成的但不同于数据库系统的组织结构形式。数据仓库的建立并不是要取代原有的数据库 ,而是在一个较全面、完善的信息应用的基础上 ,从企业现有的业务数据库中提取原始数据 ,按照主题分成不同的级 ,用于支持企业高层决策分析。 从数据库技术的角度来看 ,数据仓库提供了多种数据源上的统一的数据平台。 (1)数据源。不仅包括各种常见的数据库 ,也包括各种文件数据、多媒体数据、HTML 文件、知识库、现有信息系统的数据、历史遗留的数据等 ,这些数据源既来自采油厂内部 ,也来自采油厂外部。 (2) 数据仓库管理。确定数据仓库信息需求之后，需要进行数据建模，确定从数据源到数据仓库的数据抽取、清理和转换过程，分析、划分维数以及确定数据仓库的物理存储结构。元数据是数据仓库的核心，用于存储数据模型、定义数据结构、转换规划、数据仓库结构和控制信息等。管理部分包括对数据的安全、归档、备份、维护、恢复等工作。 (3) 数据集成分析。对进入数据仓库的数据进行净化、过滤、总结 ,或者与其他数据源的数据进行合并,再转到数据仓库中。为了把新的数据准确地集成到数据仓库中 ,需要对数据进行完整性、一致性、冗余性检查 ,还要考虑时间顺序和数据的变化等。 数据仓库是近年来在信息管理领域得到迅速发展的一种面向主题的、集成的、随时间变化的、非易失性数据的集合，其目的在于支持管理层的决策。数据仓库已经成为有竞争力企业的基础。对数据仓库的使用主要涉及信息的使用者和知识的挖掘者两大类用户，这两类用户对数据仑库的使用与要求各有差异。数据仓库通常主要包含数据仓库数据库、数据集市／知识挖掘库、数据源、数据准备区，以及各种管理工具和服务工具。数据仓库创建以后，先要从数据源中抽取所需的数据到数据准备区，在数据准备区中经过数据的净化处理，再加载到数据仓库数据库中，最后根据用户的需求将数据发布到数据集市中。 采油厂数据仓库体系结构 2. 1 　采油厂数据仓库概念模型 采油厂数据仓库应用系统是基于符合 Internet网络技术标准的面向采油厂及其相关职能部门和协作单位，面向油田内部的信息处理和信息服务系统的集合，是一个利用信息技术、通信技术、计算机技术 ,有效地实现油气田开发、企业经营管理等功能，在油田、采油厂、井队之间建立有机的信息服务、信息共享的系统集合。