大数据与数字图书馆-国家图书馆.pdf

2012年中国图书馆年会——中国图书馆学会年会·中国图书馆展览会 大数据时代的数字图书馆 Digital Library in the Big Data Age 报告人：陈传夫 武汉大学信息管理学院 cfchen@ 2012.11.23 提纲 大数据与数字图书馆：为 1 何要提出这个命题？ 大数据对数字图书馆的挑 2 战：为何总是信息革命？ 对策探讨：数字图书馆 3 向业务流程上游移动 •大数据与数字图书馆 3 大数据与数字图书馆 • 什么是大数据？大数据在哪里？ • 数字图书馆受到广泛的重视， 成绩斐然 • 数字图书馆的建设与需求存在 差距 根据IDC监测，全球数据量大约每两年翻一番，意味 着人类在最近两年产生的数据量相当于之前产生的全 部数据量，预计到2020年，全球将总共拥有35ZB的 数据量，相较于2010年，数据量将增长近30倍。 指数型增长的海量数据 图片来源：IBM;Cisco;comScore;MapReduce;Radicati Group;Twitter;You Tube •什么是大数据？ ♦社会80% 的数据到底掌握哪里？政府、企业？ 今天的数字图书馆在业务流程的哪一端？ ♦ “大数据”是一个用来描述海量的结构化和非 结构化数据的流行短语，这些数据的容量非常 巨大以至于很难用传统的数据库和软件技术进 行存储、管理和处理。 ♦大数据的特性可以用4V描述 ▪大量化（Volume ）：存储大；计算量大 ▪多样化（Variety ）：来源多；格式多 ▪快速化(Velocity)：增长速度快；处理速度要求快 ▪准确化（Veracity ）：浪里淘沙却又弥足珍贵 11/26/2012 大数据的四个主要特征 图片来源：国金证券研究所 •大数据在哪里？ 企业大数据 含物联网、联通、移 动、电信等通信和互 联网运营商等 业务流程数据 社会大数据 含天文望远镜拍摄的图 Big Data 含SNS、微博、新闻 像、视频数据、气象学 媒体、视频网站、电 里面的卫星云图数据等 子商务、招聘信息等 2011年 产生与复制的信息量 超过1.8ZB 5年中增长了9倍 科学