大数据与行业融合手册.docx

大数据与行业融合手册

第1章大数据基础理论

1.1大数据定义与特征

大数据是指具有海量、高增长率、多样化的数据集合，且这些数据往往来自多源异构系统，难以用传统数据库进行有效管理。例如，某电商平台在2023年接入的传感器数据每天产生500亿条记录，远超传统关系型数据库的存储极限，这便是大数据的典型场景。大数据的核心特征是4V模型，即数据体量巨大（Volume）、数据类型繁多（Variety）、处理速度快（Velocity）以及价值密度低（Value）。以气象监测为例，一个城市的气象站每天产生数TB的原始数据，这些数据包含温度、湿度、风速等连续值，构成了高维度的数据流。