数据智能与应用 (4).pptVIP

第二章数据智能之发展

第一节大数据时代1

一、大数据时代已经来临2“数据，已经渗透到当今每一个行业和业务职能领域，成为重要的生产因素。人们对于海量数据的挖掘和运用，预示着新一波生产率增长和消费者盈余浪潮的到来。”——麦卡锡公司《大数据时代：生活、工作与思维的大变革》——舍恩伯格“大数据时代已经降临，在商业、经济及其他领域中，决策将日益基于数据和分析而作出，而并非基于经验和直觉。”——纽约时报《大数据云图》——大卫·芬雷布

二、大数据产生的背景3信息科技进步现代信息技术产业的几次浪潮：20世纪六七十年代的大型机浪潮，上世纪80年代以后的微型机浪潮，上世纪末的网络化浪潮，近几年的大数据浪潮。“摩尔定律”的提出：美国科学家戈登?摩尔发现了晶体管增长规律的“摩尔定律”。在摩尔定律的指引下，计算机产业会进行周期性的更新换代，计算能力和性能的不断提高。同时，以前的低速带宽也已经远远不能满足数据传输的要求，各种高速高频带宽不断投入使用，光纤传输带宽的增长速度甚至超越了存储设备性能的提高速度，被称为是超摩尔定律。智能设备的普及、物联网的广泛应用、存储设备性能的提高、网络带宽的不断增长都是信息科技的进步，它们为大数据的产生提供了储存和流通的物质基础。

二、大数据产生的背景4云计算技术兴起云计算技术：使用云端共享的软件、硬件以及各种应用，来得到我们想要的操作结果，而操作过程则由专业的云服务团队去完成。云空间：数据存储的一种新模式，云计算技术将原本分散的数据集中在数据中心，为庞大数据的处理和分析提供了可能。数据资源化趋势大数据：分为消费大数据和工业大数据。云计算为大数据庞大的数据存储和分散的用户访问提供了必需的空间和途径，是大数据诞生的技术基础。

三、大数据的发展历程萌芽阶段：20世纪90年代到21世纪初1980年，阿尔文?托夫勒所著的《第三次浪潮》：将大数据称颂为第三次浪潮的华彩乐章。90年代，复杂性科学的兴起，不仅给我们提供了复杂性、整体性的思维方式和科学研究方法，还给我们带来了有机的自然观。1997年，大卫?埃尔斯沃斯和迈克尔?考克斯首次使用了“大数据”概念。1998年，《大数据科学的可视化》发表，大数据正式作为一个专用名词出现在公共刊物之中。5这一阶段可以看做是大数据发展的萌芽时期，在当时大数据还只是作为一种构想或者假设被极少数的学者进行研究和讨论，其含义也仅限于数据量的巨大，并没有更进一步的探索有关数据的收集、处理和存储等问题。由于数据库技术成熟，数据挖掘理论成熟，也称数据挖掘阶段。

三、大数据的发展历程发展阶段：21世纪初至2010年2001年，“4V”特征提出。2007年，数据密集型科学的出现，不仅为科学界提供了全新的研究范式，还为大数据的发展提供了科学上的基础。2008年，美国《自然》杂志推出了一系列有关大数据的专刊，详细讨论了有关大数据的一系列问题，大数据开始引起人们的关注。2010美国信息技术顾问委员会（PITAC）发布《规划数字化未来》的报告，详细叙述了政府工作中对大数据的收集和使用，美国政府已经高度关注大数据的发展。6这一阶段被看做是大数据的发展时期，大数据作为一个新兴名词开始被理论界所关注，其概念和特点得到进一步的丰富，相关的数据处理技术相继出现，大数据开始展现活力。

三、大数据的发展历程兴盛阶段：2011年至今2011年，IBM公司研制出了沃森超级计算机，使大数据计算迈向了一个新的高度。麦肯锡发布《海量数据，创新、竞争和提高生成率的下一个新领域》研究报告，详细介绍了大数据在各个领域中的应用情况，以及大数据的技术架构，提醒各国政府为应对大数据时代的到来，应尽快制定相应的战略。2012年，世界经济论坛在