海量数据离线存储相关实施标准与探讨.pdfVIP

海量数据离线存储相关 实施标准探讨 北京汉龙思琪数码科技有限公司 王山水 么宏岭 随着信息技术的不断普及应用和电子数据资源在社会各个领域的不断积累，各个 档案馆、文化馆、图书馆、美术馆、展览馆及行业数据中心均存在海量数据资源且逐 年迅速增长，我们迎来了海量数据时代。 在海量数据时代，如果过分依赖单一数据源，而不对其进行有效的备份和多介质 存储，带来的隐患也将是无法预料的。 目前社会上已经开始广泛的使用、研发离线存储产品，将大量的档案数据、图书 数据、音像文件、图片文件、电子文件等多种数据格式，以光盘、磁带、硬盘的多种 介质形式进行长期的离线存储。但是在应用的过程中缺乏统一标准，仅单一的强调了 异地、异质的安全备份。但对于如何进行安全的，无隐患的异地异质备份，什么样的 设备，什么样的方式，应该有多少的冗余空间等等一系列的问题却并没有一套切实可 行的技术标准进行衡量。 1离线存储及其介质 1．1离线存储 离线存储(OffStore)主要是目前来讲主要使用光盘或磁带存储。大多数情况下 主要用于对在线存储的数据进行备份，以防范可能发生的数据灾难，因此又称备份级 的存储。 离线存储在目前的应用中主要作为在线存储的安全备份和应急备份。为在线存储 的灾后数据恢复等提供保障数据。 目前，随着社会的发展，图书馆、档案馆、科技馆、博物馆、文化馆、美术馆等 大型场馆，特别是军队、政府机构和商业机构也十分需要如公安、民政、国土、银 行、保险、医院等各类海量数据存储机构。对于离线存储均具有使用需求，离线存储 115 对于长期不利用的数据具有在线或近线没有的管理优势，节能优势。 1．2离线存储介质 当今社会离线存储的主要介质包括：磁带、光盘、硬盘三种。其中 1．2．1磁带磁带主要以防磁柜进行存储，使用磁带机进行读取。磁带属于 传统的离线存储介质，广泛地应用于数据的离线备份存储。具有存储量大，保存时间 较长。但缺点明显。当需要读取数据时，需要把带子卷到头，再进行定位。对于保存 环境相对光盘、硬盘更加困难，需要保障存储的温湿度及考虑周围磁场的严格保存环 境条件。 磁带的读取需要配合磁带机使用，不能支持单盘单独离线查询和单盘管理。设备 厂商和磁带规格经常发生变化。 从灾备角度看数据的可逆性和可恢复性不如硬盘。 1．2．2光盘光盘目前存储一般存放于光盘柜或防磁柜内。需要时进行逐个查 询后，再另行读取。光盘目前的离线存储利用方式分为光盘塔、光盘库两种。 (1)光盘塔(CD—ROM 器串联而成的，光盘预先放置在CD—ROM驱动器中，事实上相当于多个CD— ROM驱动器的“堆砌。光盘塔一次可共享的CD—ROM光盘的数量与其所拥有的 盘，访问速度较之光盘库稍快。 (2)光盘库(CD--ROMJukebox)。光盘库的设计思路是由投币式点唱机而来。 它是一种带有自动换盘机构(机械手)的光盘网络共享设备。光盘库一般配置有1至 自动换盘机构首先将已放在CD--ROM中的光盘取出并放置到盘架上的指定位置， 然后再从盘架中取出用户所需的CD--ROM光盘，并将此光盘送人CD～ROM驱动 器中。由于自动换盘机构的换盘时间通常在秒量级，因此光盘库的访问速度较慢。 1．2．3硬盘硬盘存储以磁盘为存储介质的存储器。它是利用磁记录技术在涂 有磁记录介质的旋转圆盘上进行数据存储的辅助存储器。具有存储容量大、数据传输 率高、存储数据可长期保存等特点。硬盘是近几年才在离线存储上应用的介质，之前 受制于硬盘的价格居高不下及单片容量较小的限制，一直未在离线存储中进行使用， 但随着硬盘价格的走低，容量的增加，硬盘成为了最经济，最稳定。读取最方便的存 储介质。同时，硬盘在离线存储的发展中可以利用虚拟技术进行光盘数据以及磁带数 据存储的便捷性也是光盘和磁带无法比拟的。硬盘在未来的离线存储发展中，必然占 据重要的位置。 1．3现有离线存储介质在未来的发展 1．3．1磁带 磁带在未来的发展主要将以带库的形式进行保管，即磁带+存 储设备为一体的进行管理，利用。但是相对磁带的容量比和性价比来说，磁带+带库 在未来的发展正在逐步为硬盘盘阵系统中的虚拟带库所替代。 目前，更多的企事业单位开始选择使用硬盘盘阵系统中的虚拟带库来进行资