大数据特征、应用与逻辑架构分析.pdfVIP

大数据（诊䜤䔤槊跊㼤t㼤）益定义

•指无法在一定时间范围内用常规软件工具进行捕捉、管

理和处理的数据集合，是需要新处理模式才能具有更强

的决策力、洞察发现力和流程优化能力来适应海量、

高增长率和多样化的信息资产。

大数据的緊㐤特点

专业公司IDC对大数据特征的定义・4V

Variety•多样性

UinHiiiii

数据量巨大结构化数据、半结构化沙里淘金，价值密度低实时获取需要的信息

数据和非结构化数据一部数小时的，可大数据区分于传统数

全球在2010年正式如今的数据类型早已不能有用的数据仅仅只有据最显著的特征。如

进入ZB时代是单一的文本形式，订今已是ZB时代，在

IDC预计到2020年,一两秒。如何迅速〃提

单、日志、音频，能力如此海量的数据面前,

全球将总共拥有40ZB提出了更高的要求纯”是大数据亟待解决处理数据的效率就曷

的数据量的难题企业的生命

大数据逻辑架构

逻辑架构-（数据分析+分布式文件+归档+...）

应L引曲L.喘

媒宏互联网高性能计算……行为预测、实时分析……

用

层

非结构啰」对象海结球谡据大数据共享bi大数据分析昼°

NAS接口对象接口归档接口|数据库接口|Mapreduce||HDFS|

存统一管理、统一命名空间

负载均衡动态分级［管理、快照|mpp并行数据库|全局数据解

储1而标__分析

层

传统数据库的特点

并行数据库-企业数据分析

传统的关系数据库部署难以处理TB级数据，不能很好的支持高级别的数据分析。

理想的满足海量数据管理和实时性处理要求的数据

库服务器拥有无限快的处理器、无限容量和无

限带宽的，并且相对的便宜

我们能够拥有这样的机器吗？NO

有限快的处理器*“无限数量:“无限”快的处理能力

有限带宽和容量的单元*无限数量=无限容

量和“无限带宽的能力

大数据的数据库

并行数据库代表性的产品

产品厂家

Sybas