大数据时代下观察与思考.docVIP

大数据时代下观察与思考 　　摘 要：《大数据时代》是由英国作家维克托麦尔?舍恩伯格所著，作者是研究大数据方面的大师。本书前瞻性地指出，大数据带来的信息风暴正在变革我们的生活、工作和思维，大数据开启了一次重大的时代转型，并用三个部分讲述了大数据时代的思维变革、商业变革和管理变革。书中展示了谷歌、微软、亚马逊、IBM、苹果、facebook、twitter等大数据先锋们最具价值的应用案例。作为信息技术战线上的一名工作者，娓娓读来，思忖良多。 　　关键词：大数据;大数据时代;云计算 　　一、什么是大数据 　　1980年，著名未来学家阿尔文?托夫勒便在《第三次浪潮》一书中，将大数据热情地赞颂为“第三次浪潮的华彩乐章”。自2009年开始，“大数据”成为互联网信息技术行业的流行词汇。那么何谓“大数据”呢？“大数据”（big data），或称巨量数据、海量数据，是由数量巨大、结构复杂、类型众多数据构成的数据集合，是基于云计算的数据处理与应用模式通过数据的集成共享、交叉复用形成的智力资源和知识服务能力。还有研究机构如此定义“大数据”：“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。从某种程度上说，“大数据”是数据分析的前沿技术，是从各种各样类型的数据中，快速获得有价值信息的能力。 　　在我国，“大数据”作为一个较新的概念，目前尚未直接以专有名词被政府提出来给予政策支持。不过，在2011年12月8日工信部发布的物联网“十二五”规划上，把信息处理技术作为4项关键技术创新工程之一被提出来，其中包括了海量数据存储、数据挖掘、图像视频智能分析，这都是大数据的重要组成部分。而另外3项关键技术创新工程，包括信息感知技术、信息传输技术、信息安全技术，也都与“大数据”密切相关。2013年5月10日，阿里巴巴集团董事局主席马云在淘宝十周年晚会演讲时说，大家还没搞清PC时代的时候，移动互联网来了，还没搞清移动互联网的时候，大数据时代来了。是的，大数据时代真的来了。 　　二、大数据的特点 　　1.数据体量巨大。以互联网为例，一天之中，互联网产生的全部内容可以刻满1.68亿张DVD;发出的邮件有2940亿封之多;发出的社区帖子达200万个，相当于《时代》杂志770年的文字量。截止到2012年，全球数据量已经从TB（1024GB=1TB）级别跃升到PB（1024TB=1PB）、EB（1024PB=1EB）乃至ZB（1024EB=1ZB）级别。国际数据公司（IDC）的研究结果表明，2008年全球产生的数据量高达1.82ZB，相当于全球每人产生200GB以上的数据。而到2012年为止，人类生产的所有印刷材料的数据量是200PB，全人类历史上说过的所有话的数据量大约是5EB。IBM的研究称，整个人类文明所获得的全部数据中，有90%是过去两年内产生的。而到了2020年，全世界所产生的数据规模将达到今天的44倍。 　　2.数据类型繁多。大数据时代来临首先由数据丰富程度决定的，大数据来源于各种各样的渠道。互联网、社交网络的全球化普及，大量的UGC（互联网术语，全称为User Generated Content，即用户生成内容的意思）内容、音频、文本信息、视频、图片等非结构化数据出现了。云计算、移动互联网、车联网、手机、平板电脑、PC以及各种各样的传感器，无一不是数据来源或者承载的方式。 　　3.数据允许不精确。在越来越多的情况下，使用所有可能获取的数据变得更为可能，但为此也要付出一定的代价。以视频为例，连续不间断监控过程中，可能有用的数据仅仅有一两秒。然而，在不断涌现的新情况里，允许不精确的出现已经成为一个新的亮点，而非缺点。大数据时代要求我们重新审视精确性的优劣，不仅让我们不再期待精确性，也让我们无法实现精确性。 　　4.数据要求处理速度快。速度要求是大数据处理技术和传统的数据挖掘技术最大的区别。大数据是继云计算、物联网之后IT产业又一次颠覆性的技术变革。云计算主要为数据资产提供了保管、访问的场所和渠道，而数据才是真正有价值的资产。企业内部的经营交易信息、物联网世界中的商品物流信息，互联网世界中的人与人交互信息、位置信息等，其数量将远远超越现有企业IT架构和基础设施的承载能力，实时性要求也将大大超越现有的计算能力。 　　三、大数据时代下的变革 　　“这是一场革命，庞大的数据资源使得各个领域开始了量化进程，无论学术界、商界还是政府，所有领域都将开始这种进程。”――哈佛大学 社会学教授加里?金如是说。大数据时代下网民和消费者的界限正在消弭，政府、企业或社会的疆界变得模糊，数据成为核心的资产，并将深刻影响政府的管理模式、企业的业务模式。大数据对国家治理模式，对企业的决策、组织和业务流程，对个人生活方式都将产生巨大的影响。未来