大数据基础：大数据概述：数据流处理与Storm.docx

PAGE1

PAGE1

大数据基础：大数据概述：数据流处理与Storm

1大数据基础概念

1.1大数据的定义

大数据（BigData）是指无法在可容忍的时间内用传统数据库工具进行捕捉、管理和处理的数据集合。这些数据集合的规模、速度和复杂性要求使用新的处理方法。大数据的出现，主要是由于互联网、物联网、社交媒体、移动设备等数据源的爆炸性增长，使得数据量级从GB、TB跃升至PB、EB甚至更高。

1.1.1特点

海量数据规模（Volume）：数据量巨大，可能达到PB级别。

快速的数据流转（Velocity）：数据生成和处理速度极快，可能需要实时处理。

多样的数据类型（Varie