大数据2精选.docVIP

大 数 据 学 院：计算机科学与工程学院 专 业： 计算机科学与技术 姓 名： 白涵冰 学 号： 201371010201 指导老师： 时 目录 引言 2 第一章 大数据的研究与应用现状 3 第二章 大数据的基本概念 4 第三章 大数据的特点 5 第四章 大数据的处理工具与技术 6 4.1大数据的处理工具 6 4.2大数据的关键技术 7 4.2.1 数据挖掘 7 4.2.2 对比分析 8 4.2.3 分析基础 8 4.2.4分析效率 8 4.2.5硬件要求 8 第五章 大数据时代面临的机遇与挑战 8 一、大数据带来的机遇 9 二、面临的挑战 9 1.大数据集成 9 2.大数据分析 10 3.大数据的隐私问题 10 4.大数据能耗问题 10 5.大数据处理与硬件的协同 11 【参考文献】 12 大数据 【摘要】云计算、物联网、社交网络等新兴服务促使人类社会的数据种类和规模正以前所未有的速度增长，大数据时代正式到来。数据从简单的处理对象开始转变为一种基础性资源，如何更好地管理和利用大数据已经成为普遍关注的话题。大数据的规模效应给数据存储、管理以及数据分析带来了极大的挑战，数据管理方式上的变革正在酝酿和发生。对大数据的基本概念进行剖析，并对大数据的主要应用作简单对比。在此基础上，阐述大数据处理的基本框架，并就云计算技术对于大数据时代数据管理所产生的作用进行分析，最后归纳总结大数据时代所面临的新挑战。 【Abstract】 Data type and amount in human society is growing in amazing speed which is caused by emerging new services such as cloud computing，internet of things and social network，the era of big data has come． Data has been fundamental resource from simple dealing object，and how to manage and utilize big data better has attracted much attention． Evolution or revolution on database research for big data is a problem．This paper discusses the concept of big data，and surveys its state of the art． The framework of big data is described and key techniques are studied． Finally some new challenges in the future are summarized． 【关键词】大数据，技术，挑战，数据分析，云计算 【key words】big data； technology；Challenge；data analysis；cloud computing 引言 提及大数据几乎是无人不晓，但大数据这个概念并不是近几年才有的，早在 1980 年，著名未来学家阿尔文·托夫勒便在《第三次浪潮》一书中，将大数据热情地赞颂为“第三次浪潮的华彩乐章”。在 20 世纪 80 年代我国已经有一些专家学者谈到了海量数据的加工和管理，但是由于计算机技术和网络技术的限制大数据未能引起足够的重视，它蕴藏的巨大信息资源也暂时隐藏了起来。随着云计算技术的发展，互联网的应用越来越广泛，以微博和博客为代表的新型社交网络的出现和快速发展，以及以智能手机、平板电脑为代表的新型移动设备的出现，计算机应用产生的数据量呈现了爆炸性增长的趋势。2012 年末出版《大数据时代》的作者英国牛津大学网络学院互联网研究所治理与监管专业教授维克托·尔耶·舍恩伯格在书的引言中说，大数据正在改变人们的生活以及理解世界的方式，而更多的改变正蓄势待发。美国总统奥巴马的成功竞选及连任的背后都有大数据挖掘的支撑，美国政府认为，大数据是“未来的新石油”，并将对大数据的研究上升为国家意志，这对未来的科技与经济发展必将带来深远影响 。如今大数据已成为一项业务上优先考虑的工作任务，因为它能够对全球整合经济时代的商务产生深远的影响。大数据的应用范围如此广泛，与大数据相关的很多问题都引起了专家和学者的重视。数据最基本的问题———大数据的定义目前还没有一个统一的定论，但大数