大数据应用与数据分析技术手册（执行版）.docxVIP

大数据应用与数据分析技术手册（执行版）

第1章大数据基础架构与生态体系

1.1大数据定义、特征与处理范式

大数据定义并非单一指标，而是指具有海量数据（Volume）、高速度（Velocity）、高价值（Value）和多样化（Variety）四大核心特征的数据集合。在《执行版》中，我们通常将其视为“处理速度超过人类阅读速度，分析能力超过人类思考速度，数据量超过人类记忆容量，分布在不同平台上的数据”的总和。定义特征直接决定了处理范式，即从传统的“批处理”向“流处理”和“实时计算”的范式转变。例如，传统电商订单处理通常在凌晨3点运行一次T+1任务，而新零售场景要求用户下单后30