大数据分析与挖掘手册（执行版）.docx

大数据分析与挖掘手册（执行版）

第1章大数据基础概念与架构

1.1定义与核心特征

大数据的核心定义源于Google提出的4V模型，即数据规模（Volume）的爆炸性增长、数据类型的多样性（Variety）、处理速度（Velocity）的高要求以及价值密度（Value）的不确定性。在实际企业场景中，这意味着传统关系型数据库已难以承载海量异构数据，必须引入非结构化数据（如日志、图片）和半结构化数据（如JSON、XML）的混合处理模式。数据特征中的“速度”要求系统必须在毫秒级时间内完成数据的采集、清洗和存储，这对实时流处理（StreamProcessing）提出了极高挑战，例