关于数字图书馆大数据系统建设的思考.docVIP

关于数字图书馆大数据系统建设的思考 　　摘 要：随着数字图书馆的建设发展，各类型数据急剧增长，正朝着海量数据方向发展，数字图书馆面临着数字资源长期保存、资源整合、信息安全以及服务创新等多方面的挑战。大数据系统建设正是解决上述问题、全面提升服务能力的有效途径。 　　关键词：大数据；数字图书馆；创新应用 　　大数据作为继云计算、物联网之后信息技术的又一重大突破，必将深刻影响人们的日常生活。特别是在数字图书馆的建设发展方面的作用不容小觑。本文研究分析了在数字图书馆建设领域大数据建设的重要意义、面临挑战、主要应用，对数字图书馆大数据系统建设进行了有益思考。 　　一、大数据概述 　　（一）大数据定义 　　对于“大数据”，研究机构Gartner给出了这样的定义。大数据是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。大数据是一个体量特别大、数据类别特别多的数据集，并且这样的数据集无法用传统数据库工具对其内容进行抓取、管理和处理，具有体量巨大、类型繁多、时效性强、价值密度低四个基本特征。大数据技术是数据采集、数据存取、云存储和分布式文件存储、各类统计分析、数据挖掘、模型预测、结果呈现等数据处理技术的统称，可以为决策乃至个人生活带来便利。 　　（二）大数据研究的发展 　　大数据研究热潮刚一兴起，就得到了众多发达国家和IT厂商的支持。2012年，美国宣布投资2亿美元用于大数据研究。市场咨询公司IDC、Gartner、麦肯锡等，均展开了大数据专项业务和服务支持；IBM等硬件厂商纷纷推出大数据从存储到分析的全套方案。我国于2015年出台了《促进大数据发展行动纲要》，这从政府到民生全方位规划部署了大数据产业的发展战略。对大数据的研究逐渐从理论到实践、从硬件到软件配套、从企业行为到国家战略。今年3月5日，在第十二届全国人民代表大会第三次会议上，李克强总理提出制定“互联网+”行动计划。所谓“互联网+”，实际上是创新2.0下的互联网发展新形态、新业态，是知识社会创新2.0推动下的互联网形态演进。它不仅仅是互联网移动了、泛在了、应用于传统行业了，更会同无处不在的计算、数据、知识，造就了无处不在的创新，推动了知识社会以用户创新、开放创新、大众创新、协同创新为特点的创新2.0。这势必对广泛应用互联网、云计算、大数据技术的数字图书馆领域产生深远的影响。 　　（三）数字图书馆与大数据技术 　　数字图书馆管理与服务数据具有规模海量、种类繁多、价值挖掘难度大的特点，这恰恰与大数据的特征是相契合，并且大数据比海量数据结构更复杂、价值密度更低、分析更为深度广度、使用价值更大。因此我们可以考虑能否通过大数据技术解决巨大的甚至是海量的图书信息存储压力、过大的资源和用户需求数据分析和过高的系统建设管理要求，从而提高数字图书馆的核心竞争力。 　　二、数字图书馆建设发展面临的挑战 　　随着大数据时代的来临，数字图书馆建设发展面临着很多新的挑战。 　　（一）传统数据存储模式应对数据海量增加的挑战。一是计算能力、存储能力的增强远远落后于数据量的增长及数据复杂性的变化。数字图书馆管理与服务数据类型除传统结构化文本数据外，还包括网络日志、图片、音频、视频、读者地理位置信息等非结构化数据，且非结构化数据占据数据总量的65%以上。二是物联网、传感网、云计算等信息技术的飞速发展，知识服务应用领域不断扩展，服务类型、数量、应用高速增长，基数巨大，使大量非结构化数据广泛交互移动，为知识管理及信息服务模式提出更高的要求。 　　（二）传统数据分析向广度深度发展的挑战。高可靠性、高可扩展性的数据分析技术成为亟待解决的问题。大数据技术不仅可以通过数据了解用户的行为、信息需求、知识应用能力，更可以利用数据对与用户的交互知识服务过程进行分析预测，如进行读者流失分析及价值分析，从而应对图书馆未来所面对的生存危机。 　　（三）总结数字图书管理经验规律的挑战。各类现行数字图书管理软件统计记录了大量重复的管理信息，管理者很难从这些重复的信息中理出头绪，总结出有价值的管理经验和规律。造成末端管理员需求很难影响顶层设计决策，至上而下的管理方式无法满足数字图书管理精确化、实时性、全过程的管理需求。 　　（四）有效规避知识产权风险的挑战。随着数字图书馆应用平台越发广泛，目前已由互联网向移动通信网、广播电视网、移动网络等平台延伸，任何人都可通过数字图书馆获取所需的知识，但如何保护知识产权这一难题，不仅要从立法许可方面着手，也需从技术上进行限制规避，最大限度的实现版权的排他性与信息共享之间平衡。 　　三、大数据技术在数字图书馆建设中的应用 　　从大数据中分析和挖掘出数字图书馆建设发展的特点规律，促进知识服务的智能辅助决策能力提高，是在新起点上推动数字