大数据汇报(内部精华版).docx

Question

大数据从何而来，互联网技术发展现状?什么是大数据、云计算与大数据有什么关系、大数据类型?

大数据如何获取、存储、处理、分析的技术?

大数据怎么用、未来发展趋势?

互联网发展趋势

Web时代的变革历程

开放程度

开放程度

Web3.0时代Personalized

diversifiedrealtime

开放的

Web1.0时代PushedWeb

1.0需求阶段：单向的，被动接受信息阶段

Web2.0时代Share

3.0价值阶段：个性化、多元化，品质化，

3.0价值阶段：个性

化、多元化，品质化，专业化、及时性

典型：开放平台

人人互联

人人互联

人物互联

2.0分享阶段：分享、参与，主动创造信息

阶段

典型：SNS、视频分享

典型：门户、搜素

封闭的

→时间

199520052015

风云变幻中

风云变幻中

物联网(2007)

云计算(2009)

大数据(2012)

2017/9/164

BigData时代到来

数据量增加数据结构日趋复杂

40

40

2

30

2

20

15

10

35

大量新数据源的出现则导致了非结构化、半结构化数据爆发式的增长

2009

20092010201120152020

根据IDC监测，人类产生的数据量正在呈指数级增长，大约每两年翻一番，这个速度在2020年之前会继续保持下去。这意味着人类在最近两年产生的数据量相当于之前产生的全部数据量

TBPBEBZB

·这些由我们创造的信息背后产生的这些数据早已经远远超越了目前人力所能处理的范畴大数据时代正在来临..

1.大数据(BigData)甲

所谓“大数据”(bigdata)指的是这样一种现象：一个公司日常运营所生成和积累用户行为数据“增长如此之快，以至于难以使用现有的数据库管理工具来驾驭，困难存在于数据的获取、存储、检索、共享、分析和可视化等方面。”这些数据量是如此之大，已经不是以我们所熟悉G或T为单位来衡量，而是以P、E或Z为计量单位，所以称之为大数据。

大数据=交易+互动+观测数据

ZB

TB

PB

T

G

M

传感器/电子标签设备移动网络用户点击流

网站日志历史记录

CRM

ERP

采购清单采购记录支出记录

WEB

市场细分服务细节顾客接触支持合同

BIGDATA

A/B测试自动定价搜索营销行为定位

广告联盟

用户生成数据

社交互动

空间GPS坐标商务数据传送

视频、音频、图片语音识别

产品/服务日志SMS/MMS

不断增长的数据多样性和复杂性

6

大数据的4V特性用

体量Volume

多样性Variety

价值密度Value

速度Velocity

非结构化数据的超大规模和增长

总数据量的80~90%

比结构化数据增长快10倍到50倍是传统数据仓库的10倍到50倍

大数据的异构和多样性

很多不同形式(文本、图像、视频、机器数据)

无模式或者模式不明显不连贯的语法或句义

大量的不相关信息

对未来趋势与模式的可预测分析

深度复杂分析(机器学习、人工智能Vs传统商务智能(咨询、报告等)

实时分析而非批量式分析

数据输入、处理与丢弃立竿见影而非事后见效

2.什么是云计算?

云计算将计算任务分布在大量计算机构成的资源池上，是各种应用系统能够根据需要获取计算力、存储空间