石油企业数据中心建设及数据服务.docVIP

石油企业数据中心建设及数据服务 　　【摘 要】在这个数据爆炸的时代，数据服务的质量直观的影响到企业的快速发展。若能实时准确的为业务人员提供数据服务，缩短业务人员收集数据和整理数据的时间，将使业务人员能有更多的精力投入到科研和生产中，直接为企业创造价值。基于此，本文对石油企业数据中心建设及数据服务进行了探讨，主要从传统的数据服务、数据中心的数据服务两方面展开了论述。 　　【关键词】数据服务 实时查询 互连互通 业务对象 业务活动 　　石油企业数据中心的建设，从根本上解决传统数据服务所面临的问题，使石油企业的数据服务有了质的升华，从传统的数据服务上升到依企业数据中心为依托的数据服务，从数据源头上解决数据服务的及时性、完整性和准确性，为石油企业全面信息化的发展奠定了坚实的基础。 　　1 传统的数据服务 　　石油企业在前期就意识到数据资料的重要性，为了保存好企业在科研或生产中产生的数据，在企业内部成立了档案室，其目的首先是保存和管理好企业数据资料，其次是为有需要的员工提供资料借阅，这种员工本人亲自到档案室查找和借阅的方式就是传统的数据服务（人工借阅资料）。 　　人工借阅资料一直沿用到现在，由于社会的进步和科技的发展，这种传统的数据服务方式严重制约了企业的快速发展，主要制约了数据的以下几个原则： 　　1.1 数据的及时性 　　由于生产或管理上的制约，科研或生产数据不能在第一时间被收集到档案室，而是被动地等待业务人员把资料汇总过来，这样数据从产生到采集入库中间相隔很长一段时间，制约了数据的及时性原则。 　　1.2 数据的完整性 　　储存在档案室里的数据是根据管理的需要对资料进行编目的，编目比较单一，不是根据业务实际情况编目，而是档案室为了管理或使用的便捷而进行的编目。数据资料的归类方法不同，有的是根据资料本身的专业类别分类的，有的是根据作业本身进行分类的，一口井的资料根据不同的归类方式进行保存和管理，在查找和应用时无法保证数据的齐全和完整，制约了数据的完整性原则。 　　1.3 数据的准确性 　　收集和汇总到档案室里的数据，要经过专业的资源建设团队进行资源建设，完成数据资料从非结构化文档到结构化文档的转变。在资源建设过程中，没有专业人员或专业软件去审核，而是直接被采集到专业应用数据库中，无法保证数据的质量，制约了数据的准确性原则。 　　2 数据中心的数据服务 　　企业在进入大数据时代，传统的数据服务不能满足现有的科研或生产需要，为了从数据源头解决这一企业难题，提出数据中心建设项目，依托数据中心为企业提供数据服务，从而解决数据源头采集、数据质量专业审核、数据实时查询和数据推送。 　　2.1 数据采集 　　为了解决数据的及时性，改变原有的数据采集方式，变被动接收为主动采集，建立数据源头采集系统，实现数据的源头化采集。 　　数据源头采集系统部署在数据产生的源头，数据在产生或录入时，依据数据采集规范，第一时间把数据资料采集或同步到采集系统中，完成数据资料的源头采集，保证数据及时入库。 　　2.2 数据质量检查 　　为解决数据的准确性，使采集到数据库中的数据都是准确的、可用的，需要建立一套数据质量审核系统。数据质量审核系统要完成数据的规范性和准确性审核。 　　针对数据本身的特性，制定相应的数据质量检查规则，完成数据的规范性审核。数据本身由数据类型和数据值组成，根据数据类型的数字型和字符型进行质量检查；根据数据值进行检查，如井的顶界深度值一定不能大于井的底界深度值等。 　　制定数据的审核流程，让数据产生的专业部门负责数据的审核，保证数据准确性。根据数据采集规范，划分数据三级审核流程，保证数据的相对准确性。一级审核是专业工程师审核，二级审核是部门经理审核，三级审核是总技术师审核。 　　2.3 数据实时查询 　　数据中心建设的最终目的是为了给业务人员提供数据共享和数据服务，由于数据中心数据库建设分为两部分，一部分是部署采集总库；另一部分是部署对象数据库。因为采集总库和对象数据库是不同类型的数据库，所以提供的数据服务类型也不相同。依托采集总库的数据服务是专业数据库互联互通，依托对象数据库的数据服务是业务对象服务和业务服务。 　　2.3.1 专业数据库互联互通 　　企业前期根据管理和业务的需求已经建立的专业数据库之间是相互独立的，数据库中的数据更是错综复杂，差异万千。为了实现这些专业数据库中的数据能相互共享，需要打通各专业数据库之间的堡垒，建立互通机制。采集总库的建设就是为了解决各专业数据库互联互通，实现各专业数据库能关联查询。 　　采集总库的建设首先是根据石油实际业务分析成果，参照现有在用专业数据库数据表，整理出需要结构化管理的业务表，其次是把这些业务表与各专业数据库中的数据表进行表间映射，完成专业数据库