基于分布式大数据图书馆服务创新模式探索.docVIP

基于分布式大数据图书馆服务创新模式探索 　　摘 要 在数字化电子图书馆的建设中，海量的资源建设与日益多元的智能服务之间的矛盾逐渐显现。论文提出分布式大数据处理技术可以为图书馆提供智能服务创造新的机遇。当前，应该把握分布式大数据技术为图书馆发展所提供的机遇，利用分布式大数据技术对海量数据进行分析、处理，提取出所需知识，拓展图书馆的服务领域，促进图书馆服务模式不断创新。 　　关键词 网络信息技术 分布式系统 大数据 数字化电子图书馆 　　分类号 G250.7 　　DOI 10.16810/ki.1672-514X.2016.07.015 　　Novel Exploration on Library Services Based on Distributed Big Data 　　Gao Qun 　　Abstract The contradictions between the construction of massive information and the increasingly diverse services appeared gradually in the construction of digital electronic library. This paper points out that the distributed big data processing technology provides the new opportunities for the intelligent services of library. Currently， we should seize the opportunity provided by the distributed big data processing technology for the development of libraries， and apply the distributed big data processing technology to analyze， process and extract the needed knowledge， so as to expand the library services and promote the service innovation. 　　Keywords Network technology. Distributed system. Big data. Digital electronic library. 　　从1996年开始，经过近二十年的发展，我国的数字图书馆建设成就斐然，主要表现为资源内容丰富，结构化比较完整、用户访问量大、投资效益高、多为政府投资、注重馆际合作、公益性服务社会效益好[1]。然而，在信息量急剧增长的今天，数字图书馆的建设面临新的需求与挑战。藉此，本文将重点围绕大数据背景下数字图书馆的建设及其服务模式进行探讨。 　　1 理论背景 　　1.1 “分布式大数据”概念简介 　　分布式处理技术是一种通过充分利用计算资源分布式网格能力，以支持在计算机集群上对大数据进行分布式处理的数据管理与分析技术。 　　实现完备的分布式处理框架通常包括了通用实用程序、分布式文件系统、分析和数据存储平台以及一个用于管理分布式处理、并行计算、工作流程与配置管理的应用层。除了提供高可用性外，分布式处理框架比传统方法能更经济高效地处理大型的、复杂结构的或非结构化的数据集，同时具有出色的可扩展性与计算速度。 　　对于大数据的描述通常使用“4V+1C”[3]，即容量（volume）、多样性（variety）、更新快速（velocity）、真实准确（veracity）和处理复杂（complexity）。容量上，比传统存储和分析解决方案所管理的数据大几个数量级的巨型数据集；多样性方面，以视屏、图像、文本、传感器数据以及“影子数据”等不同格式生成的异构、复杂和多样化的数据；更新速度快主要表现在数据都是以一个可实时查询的连续数据流的形式存在，可以根据需求提供有用信息，而不是批量生成；真实可靠具体表现在信息分析和解释上担当更重要的角色，可根据数据做出正确的、有效的、有依据的决定；处理复杂是由于大数据本身的特性所造成的，主要是指大数据的存储、实时查询和知识获取对硬件设备、操作系统以及智能算法的要求。 　　随着智能设备及其系统应用的持续扩展，从这些源头收集到的海量数据使得原有人工图书馆管理成为历史。笔者认为只有结合分布式大数据处理技术才能促使传统图书馆的转型与发展，使其成为广泛互联和移动共享的图书馆[4]，进而能够拥有更多样的服务模式和更强大的服务能力。 　　1.2 分布式大数据处理技术