大数据分析与应用技术手册.docxVIP

大数据分析与应用技术手册

第1章大数据概述与基础架构

1.1大数据定义与核心特征

大数据（BigData）并非单一的技术概念，而是指无法通过传统数据库工具进行有效管理和处理的数据集合，其核心定义通常由C.Kimball提出，强调数据的4V特征：Volume（体量）、Velocity（速度）、Variety（多样性）和Veracity（真实性）。例如，某电商平台在“双11期间每秒产生的日志量可达数亿条，这些数据若按传统SQL数据库设计，单个表需数PB大小且难以实时查询，这正是大数据场景的典型特征。数据的体量（Volume）表现为数据量的爆炸式增长，传统数据