面向大数据的数字图书馆数据库缓存模型设计-图书情报工作.PDFVIP

第５８卷 第２２期　２０１４年１１月 面向大数据的数字图书馆数据库缓存模型设计 ■ 王敬东 ［摘　要］设计面向大数据的数字图书馆信息系统数据库缓存模型，从模型的功能架构、运行流程方面进 行介绍，规定应用程序接口，在尽可能不改动数字图书馆信息系统原程序的基础上，实现用户操作序列或进程 行为序列的捕捉，并使用ＨａｍｍｅｒＯｒａ数据库测试工具对本模型进行测试，结果证明缓存模型适合处理数字图书 馆海量信息系统产生的数据，具有良好的经济性和有效性。 ［关键词］大数据　缓存模型　数字图书馆 ［分类号］Ｇ２５０ 　　ＤＯＩ：１０．１３２６６／ｊ．ｉｓｓｎ．０２５２－３１１６．２０１４．２２．０１５ １　引　言 维表的结构化形式存储。而大数据时代下更多的是包 括ＸＭＬ、Ｏｆｆｉｃｅ文档等的非结构化数据。传统方法的 　　随着信息技术的迅猛发展，数字图书馆中电子文 数据访问效率逐步降低，同时网络设备并发访问越来 献、音视频资源、期刊数据库、互联网资源等信息量以 ［３］ 越多，数据中心将面临前所未有的压力 。 指数级增长。据权威部门统计，全球数字资源每３年 １．３　海量资源的快速检索策略 增长一倍。截至２０１３年底，我国电子书种类达到２００ 　　面对数字图书馆中的大数据资源，如何快速获取 万种，每年预计仍以１８％的速度增长；电子期刊达到 和管理所需资源显得尤为重要。据统计，２０１２年全世 １．３万种，独立发行的电子报超过１５００种。以清华大 界范围内新增长的数据，有近９０％没有被科研人员有 学图书馆为例，目前共有１００余台服务器，存储量达到 ［３］ 效利用 。 ２００ＴＢ，每年数据以２０％的速度增长。这些电子资源 　　为提高数字图书馆的服务水平和质量，许多研究 既有虚拟馆藏的数字资源，也包含原来纸质资源的数 机构和技术人员从系统的体系结构和应用系统方面提 字化。数字图书馆作为信息服务中心，其海量数据具 出了诸多改进措施，包括建立服务器集群、热门数字资 有种类多、容量大、价值高等特点，在实际应用中如何 源网站的镜像和复制以及数据库缓存等。其中，缓存 兼顾海量数据的价值性、交互性和分享性，对数字图书 策略被大量实例证明是最有效的技术手段。缓存是一 馆的数据存储策略提出了新的挑战［１］。 种介于应用程序和二级存储器之间的数据预取机制， １．１　网络架构由垂直架构向水平架构转变 通过使用一定的算法降低应用层和持久层的交互频 　　传统数据访问的体系结构采用的是服务器和客户 率，对于应用程序来讲缓存是透明的（实际存在却看不 端应答的垂直结构。在大数据时代下，数字图书馆中 见），从而在不改变应用程序的前提下提高了物理数据 的海量数据分布在不同地理位置、类型各异的服务器 源的访问效率，改善程序使用者的用户体验。基于上 中。当用户在客户机上提交一个检索请求时，首先需 述想法，本文提出一种面向大数据的数字图书馆数据 要进行服务器之间的资源处理，然后传递给用户需要 库缓存模型，力求提高数字图书馆信息系统的效率。 的结果，因此横向的水平结构的服务请求将逐步替代 ［２］ ２　大数据时代下数字图书馆缓存分类 垂直服务请求 。 １．２　网络中的大量设备同时向数据中心发出服务 　　目前，根据存储位置的不同，缓存包括客户端（ｃ