基于云计算的数字图书馆资源存储研究.docxVIP

基于云计算的数字图书馆资源存储研究 随着计算机和网络技术的快速发展，数字图书馆信息资源的出现了大量的数据类型和复杂的服务器类型，以及读者的需求。现代数字图书馆面对的存储对象远远超出了目前传统图书馆的范围, 传统的存储技术如硬盘存储、光盘存储等都已无法满足数字信息迅猛增长的存储需求, 现有的网络存储技术如NAS、SAN等也不能有效地缓解存储压力。显然, 这些特点给数据存储系统提出了很高的要求, 而云计算存储技术的出现为数字图书馆资源存储提供了新的解决途径。 1 数字图书馆数据存储的不足 与传统图书馆馆藏资源相比, 数字图书馆资源有其自身的特点。从存储的角度来考虑, 数字图书馆资源具有以下几个主要特点:存储容量大;媒体形式多样;动态性;异构性。尽管近些年来, 随着数字图书馆建设进程的加快和存储技术的发展, 已经在资源存储方面取得了很大的进步, 在存储容量、扩展速度、共享性等方面也得到了改善, 但是仍然存在以下问题:数据扩展性不高;异构性、兼容性较差;数据的存储速率无法满足大数据量、大并发访问的要求。 数字图书馆资源存储的特点使其对数据存储有着很特殊的要求, 主要为:管理和维护大量的存储数据的同时, 要求确保数据的一致性、安全性、可靠性和可扩充性;要求实现对物理上分布的数据资源进行统一的集中管理;要求实现数据资源的动态存储;要求实现对异构的数据进行同构的访问。 目前数字图书馆应用比较广泛的DAS、NAS、SAN和ISCSI等网络存储系统在一定程度上解决了数据存储集中共享的问题, 他们有各自的优缺点, 并且适用环境各不相同, 表1比较了这四种存储方案。从表中我们可以看出它们总是不能全面解决数字图书馆的存储问题。 2 云存储的定义 云计算 (Cloud Computing) 是在分布式处理, 并行处理, 网格计算等基础上提出的一种新型商业计算模型, 是一种新兴的共享基础架构的方法。它把存储在大量分布式计算机产品中的大量数据和处理器资源整合在一起协同工作, 是相关的计算分布在大量的分布式计算机上, 而非本地计算机或远程服务器中, 从而使有关的数据中心的运行和互联网相似。云计算将巨大的系统连接池连在一起提供各种服务, 从而使有关的用户可以很方便地将资源切换到具体的应用上, 根据自己的需要访问计算机和存储体系。 云计算环境下的存储, 这里暂且说成云存储, 它的概念与云计算类似, 它是指通过集群应用、网格技术或分布式文件系统等功能, 将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作, 共同对外提供数据存储和业务访问功能的一个系统。当云计算系统运算和处理的核心是大量数据的存储和管理时, 云计算系统中就需要配置大量的存储设备, 那么云计算系统就转变成为一个云存储系统, 所以云存储是一个以数据存储和管理为核心的云计算系统(如图1所示) 。 云存储不是存储, 而是服务, 对使用者来讲, 并不是指某一个具体的设备, 而是指一个由许许多多个存储设备和服务器所构成的集合体。使用者使用云存储, 是使用整个云存储系统带来的一种数据访问服务。云存储的核心是应用软件与存储设备相结合, 通过应用软件来实现存储设备向存储服务的转变。 与本文前面提到的四种存储系统相比较, 云存储的优势主要体现在三个方面:首先, 高可靠性, 这将使云存储系统使用者不用经常更换新的硬件;其次, 低成本, 云存储本质上是规模化经济, 因此在成本上进行了有效的控制;第三, 自动容错能力, 因为成本低, 存储组件的损耗率相对比较高, 云存储厂商在软件层做到了很高的自动容错能力, 而不是依赖硬件本身的容错。概括起来讲, 云存储不仅能满足大容量、容错性和高效性这些最基本存储需求, 还能满足自主控制、透明访问、异构性、动态性等特殊存储需求。 3 云数据库技术 从云存储的特性分析中我们得出云存储技术能全面、灵活地解决数字图书馆面临的存储问题。云存储提供快速简单的对于容量、性能、服务质量和连接协议的可升级性, 可对所有图书和多媒体数据进行统一查看和管理, 还可优化分布式的电子图书馆远程数据访问的性能。云存储架构可实现数据库和图书馆之间更紧密的应用整合, 提供更高的数据保护, 并可以更简单地管理数据资源, 这些优势极大降低了数字图书馆建设在购买、扩容和管理时的费用。下面笔者针对数字图书馆资源存储的几个主要问题, 探讨云计算存储方案在解决其问题时所涉及的关键技术。 3.1 存储模式不合理 近几年来, 数字图书馆信息资源呈几何级数增长, 其存储的数据总量达到海量规模, 在传统存储模式下不能满足其存储容量不断增长需求。但在云计算环境下, 利用其高性能的海量数据通道, 把整个系统的各个主要功能模块连成一体, 不仅保证它们之间海量数据传输的实时性、可靠性和安全性, 而且提供统一的数据交换界面, 有效地支