基于大数据时代的档案价值及其开发利用探究.docVIP

基于大数据时代的档案价值及其开发利用探究 　　摘 要：大数据时代是建立在互联网、物联网等现代网络渠道广泛收集大量数据资源基础上的数据存储、价值提炼、智能处理和展示的信息时代；档案“数据价值”是一种通过大数据技术处理、挖掘和应用而获得的价值。运用大数据技术对海量档案数据进行存储、分析，挖掘开发出新的档案“数据价值”，为社会各界多途径提供利用，将成为大数据时代档案部门的重要任务 关键词：大数据；大数据时代；档案价值；数据价值；开发利用 “大数据这个名词并不新鲜，早在1980年代，美国就有人提出了大数据的概念。”[1]进入21世纪以来，世界上许多国家开始关注大数据的发展、应用和研究，“在云计算、 物联网等技术的推动下，全球已步入了大数据时代。”[2]目前来看，我国大数据的理论研究和应用研究刚刚起步，学术界、企业界及政府部门对该领域的重视程度前所未有。本文仅就大数据时代的档案价值及其开发利用问题，进行初步探究 1 大数据、大数据时代及其特征 1.1 大数据概念及其特征。目前，关于大数据的定义众说纷纭。例如，维基百科给出的定义是：“大数据指的是所涉及的资料规模巨大到无法透过目前主流软件工具在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯”；大数据科学家John Rauser给出的定义是：“大数据指任何超过了一台计算机处理能力的数据”；美国咨询公司麦肯锡的报告的定义是：“大数据是指无法在一定时间内用传统数据库软件工具对其进行抓取、管理和处理的数据集合”。[3]我们认为，大数据定义之所以众说纷纭，主要是因为大数据所涉及的内容太“大”，大家看它的角度不一样。我们可以把大数据作为研究对象，从数据本身和处理数据的技术两个方面理解大数据，这样理解大数据就有狭义和广义之分。狭义的大数据是指数据的结构形式和规模：就数据的结构形式而言，大数据不仅包含结构化数据，更多的是指半结构化的数据和非结构化数据，指大数据包含的数据形式多样；就数据的规模而言，大数据等同于海量数据，指大数据包含的数据规模巨大。广义的大数据不仅包括数据的结构形式和数据的规模，还包括处理数据的技术。大数据的处理技术是指能够从不断更新增长、有价值信息转瞬即逝的大数据中抓取有价值信息的能力。不管从广义的角度，还是从狭义的角度来看，大数据的核心是数据。因此，从统计学与计算机科学角度而言，大数据指那些超过传统数据系统处理能力、超越经典统计思想研究范围、不借用网络无法用主流软件工具及技术进行单机分析的复杂数据的集合。对于这一数据集合，在一定的条件下和合理的时间内，我们可以通过现代计算机技术和创新统计方法，有目的地进行设计、获取、管理、分析，揭示隐藏在其中的有价值的模式和知识。大数据的基本特征主要体现在以下四个方面：一是大量性。是指大数据的数据量巨大。二是多样性。是指数据类型繁多，不仅包括以文本资料为主的结构化数据，还包括网络日志、音频、视频、图片、地理位置等半结构或非结构化的数据资料。三是价值性。指大数据价值巨大，但价值密度低，可能转瞬即逝。四是高速性。指数据处理时效性高 1.2 大数据时代及其特征。大数据时代是建立在通过互联网、物联网等现代网络渠道广泛大量数据资源收集基础上的数据存储、价值提炼、智能处理和展示的信息时代。在这个时代，人们几乎能够从任何数据中获得可转换为推动人们生活方式变化的有价值的知识。大数据时代的基本特征主要体现在以下几个方面：一是社会性。在大数据时代，从社会角度看，世界范围的计算机联网使越来越多的领域以数据流通取代产品流通，将生产演变成服务，将工业劳动演变成信息劳动。二是广泛性。在大数据时代，随着互联网技术的迅速崛起与普及，计算机技术不仅促进自然科学和人文社会科学各个领域的发展，而且全面融入到人们的社会生活中。人们在不同领域采集到的数据量之大，达到了前所未有的程度。三是公开性。在大数据时代会有越来越多的数据被开放，被置于公共的网络环境之中。这种公开性和公共性的实现取决于若干个网络开放平台或云计算服务以及一系列受到法律支持或社会公认的数据标准和规范。四是动态性。人们借助计算机通过互联网进入大数据时代，充分体现了大数据是基于互联网的及时动态数据，不仅数据资料的收集具有动态性，而且数据存储技术、数据处理技术也随时更新，即处理数据的工具也具有动态性 2 基于大数据时代的档案价值的新变化及其现实意义 2.1 档案“数据价值”及其主要特征。传统档案价值理论对档案价值的判断和分析都是基于信息层面的，无论是凭证价值，还是参考价值，都是通过查阅档案满足人们查证查询某一信息的需求而实现的价值，可以统称为档案“信息价值”。用大数据的视角来审视档案的价值，档案不仅具有信息层面的价值，还具有数据层面的价值，即档案“数据价值”。档案“数据价值”