《2014大数据介绍.docxVIP

大数据介绍目 录前言11.概述21.1 什么是大数据？21.2数据的变革31.3大数据的来源及应用42.大数据与其他技术关系52.1 与云计算的关系52.2 与数据挖掘的关系52.3 与物联网、移动互联网的关系63.大数据主要的技术介绍63.1分布式文件系统(GFS/HDFS)63.2 Mapreduce73.3 NoSQL技术83.4 分布式技术94.大数据系统105.企业大数据应用116.大数据在公安行业的应用12范例1：谷歌公司对甲型H1N1流感的预测21前言大数据时代的到来，是全球知名咨询公司麦肯锡最早提出的，麦肯锡称:“数据，已经渗透到当今每一个行业和业务职能领域，成为重要的生产因素。人们对于海量数据的挖掘和运用，预示着新一波生产率增长和消费者盈余浪潮的到来。”概述1.1 什么是大数据？大数据(big data)，或称巨量资料，指的是所涉及的资料量规模巨大到无法通过目前主流软件工具，在合理时间内达到获取、管理、处理、并整理成为帮助企业经营决策为目的资讯。（百度官方说法）另一种说法就是具有4V特性的数据称为大数据，包括：1、Volume（巨大的数据量）? 集中储存/集中计算已经无法处理巨大的数据量2、Variety（多结构化数据） ? 文本/图片/视频/文档等3、Velocity（增长速度很快）?用户基数庞大/设备数量众多/实时海量/数据指数级别增长，同时意味着需要海量数据