光存储技术在石油勘探开发数据管理中应用.docVIP

光存储技术在石油勘探开发数据管理中应用 　　[摘 要] 蓝光存储具有高容量、低能耗、随机存取速度较高、保存时间长等突出优势，是一种很有发展前景的存储方式。首先分析了石油勘探开发数据管理在容量、性能、能耗等方面的需求，提出了一套适合国内实际数据情况的、基于蓝光存储的勘探开发数据管理解决方案，采用该方案在中国石油勘探与生产技术数据管理系统做了实际测试，确保了石油勘探开发领域相关各类数据的准确性、完整性，也预示着普遍采用光存储方式来管理海量数据可能会成为一种新的发展趋势。 　　[关键词] 光存储；石油勘探开发；存储分级；大块数据 　　doi ： 10 . 3969 / j . issn . 1673 - 0194 . 2017. 03. 086 　　[中?D分类号] TQ597.92 [文献标识码] A [文章编号] 1673 - 0194（2017）03- 0158- 03 　　1 引 言 　　随着技术进步，油气勘探开发数据量量级已经上升到到TB、PB级，地震勘探采集分辨率、日工作效率大幅提高，物联网等相关数据快速增长，真正进入了“大”数据时代。如何应对上述海量数据的管理需求，如何科学存储和有效调度日益增长的数据，满足石油行业的业务需求，已成为石油行业信息化工作中需要重点关注的问题。 　　容量满足海量数据的存储需求、根据数据类型和使用频率进行科学的存储和精细化管理、有效调度，寻找用户满意的速度和合理成本的最佳结合点、保证数据的安全可靠，是未来石油行业数据管理的重点工作。 　　本文总结了目前石油行业海量专业数据的存储现状，完整阐述了当前存储架构的工作方式和面对的挑战，分析了海量数据存储的发展趋势，针对现状、挑战和趋势，提出了以光存储为基础的分级精细化数据管理解决方案，并在大型信息系统做了实际测试，具有良好的应用价值。 　　2 需求分析 　　首先分析勘探开发数据存储现状和分类，细化存储需求；然后剖析了主流的勘探开技术数据管理系统的功能架构，针对性提出技术方案。 　　2.1 当前石油海量数据存储及数据管理现状 　　当前石油数据类型主要可以划分为大块数据、各类专业数据、文档数据、结构化数据（数据库文件）和备份数据等，除此之外，在不同的信息管理系统中，存在各类特有的应用软件的专有数据类型；而当前主要的数据存储架构为磁盘阵列和磁带库相结合，以应用系统为单位，搭建SAN网络进行存储，部分数据管理系统采用全磁盘阵列的形式，其中磁带库主要用于大块数据的归档和备份数据的管理；档案馆与应用系统、专业人员的数据交互方式也主要是磁盘和磁带，其中磁带数据还需要经过转录等操作后才能使用或归档。 　　2.2 面临的问题和挑战 　　当前石油行业数据管理现状面临着以下几个主要问题。 　　（1）存储容量不足：数据作为油田单位最重要的资产之一，必须永久妥善保存，但是随着数据量的快速增长，现有的可用存储空间正面临着巨大的压力，部分应用和数据管理系统已经出现了存储空间无法支撑后续生产的严重问题。 　　（2）存储成本不断增长：存储成本的问题应该从综合保有、长期保存的角度来思考看待，按照当前的存储架构，磁盘阵列和磁带库的购买、维护和数据迁移成本过高，其中，带库的使用专业性更强、维护难度更大，这些都造成了存储成本可能会在长期的发展过程中不断增加。 　　（3）存储介质的兼容性：兼容性问题在磁带介质的使用中尤为突出，因为磁带介质本身的特点导致某一磁带型号必须使用特定类型的磁带机才能进行读写，当前已经出现了大量因磁带机损坏，且新型号磁带机无法读取导致磁带数据无法正常使用的现象。 　　（4）数据结构划分不够精细，存储资源利用不够合理：部分数据管理系统为了追求响应时间，将大块数据全部存储在磁盘介质上，这样做虽然能实现最快的I/O速度，但在实际生产过程中，绝大部分大块数据并不会长期被频繁的调用，而是集中在某一阶段密集使用，这就导致了大量已经冷却的数据占用了过多的快速存储I/O资源，增加了存储压力和成本，这种压力是不断持续的，这个问题随着云化的不断深入已经越发突出。 　　2.3、 未来石油专业数据管理发展趋势 　　（1）高容量、低能耗：在增加存储容量的同时，必须注重能耗的降低，节省运营成本，降低资源消耗，这是企业发展的需求，同时也是企业的社会责任体现。 　　（2）冷、热、温数据精细管理：重点在于冷、热、温数据的科学划分和灵活转换两个部分，通过科学的数据类型划分，使得不同特点、类型的数据保存在最适合的介质上，同时，灵活的转换保证了当数据需求产生变化的时候，数据类型能够随之快速响应，真正实现以应用为核心的精细管理。 　　（3）向后、向下全面兼容：作为长期保存的专业数据，应保证在未来较长的时间段内，数据依旧可读、可用且可靠，不受硬件条件和存储结构变化的影