2025年什么是大数据 .pdfVIP

吾日三省乎吾身。为人谋而不忠乎?与朋友交而不信乎?传不习乎?——《论语》

一、什么是大数据

1、概念：大数据（bigdata），指无法在可承受的时间范围内用常规软件工具进行捕

捉、管理和处理的数据集合。

麦肯锡全球研究所给出的定义是：一种规模大到在获取、存储、管理、分析方面大大超

出了传统数据库软件工具能力范围的数据集合，具有海量的数据规模、快速的数据流转、多

样的数据类型和价值密度低四大特征。大数据技术的战略意义不在于掌握庞大的数据信息，

而在于对这些含有意义的数据进行专业化处理。换而言之，如果把大数据比作一种产业，那

么这种产业实现盈利的关键，在于提高对数据的“加工能力”，通过“加工”实现数据的“增

值”。

2、如何理解大数据？

大数据概念分解成三个层面：

第一层面是理论，理论是认知的必经途径，也是被广泛认同和传播的基线。从大数据的

特征定义理解行业对大数据的整体描绘和定性；从对大数据价值的探讨来深入解析大数据的

珍贵所在；洞悉大数据的发展趋势；从大数据隐私这个特别而重要的视角审视人和数据之间

的长久博弈。

第二层面是技术，技术是大数据价值体现的手段和前进的基石。分别从云计算、分布式

处理技术、存储技术和感知技术的发展来说明大数据从采集、处理、存储到形成结果的整个

过程。

第三层面是实践，实践是大数据的最终价值体现。分别从互联网的大数据，政府的大数

据，企业的大数据和个人的大数据四个方面来描绘大数据已经展现的美好景象及即将实现的

蓝图。

博观而约取，厚积而薄发。——苏轼

3、大数据的特点：4V特点（IBM提出）：Volume（大量）、Variety（多样）、Value

（价值）、Velocity（高速）。

第一，数据体量巨大。大数据的起始计量单位至少是P（1000个T）、E（100万个T）

或Z（10亿个T）；第二，数据类型繁多。比如，网络日志、视频、图片、地理位置信息

等等。第三，价值密度低，商业价值高。第四，处理速度快。

4、大数据与云计算联系与区别

从技术上看，大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然

无法用单台的计算机进行处理，必须采用分布式架构。它的特色在于对海量数据进行分布式

数据挖掘，但它必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术。

大数据（Bigdata）通常用来形容一个公司创造的大量非结构化数据和半结构化数据，

这些数据在下载到关系型数据库用于分析时会花费过多时间和金钱。大数据分析常和云计算

联系到一起，因为实时的大型数据集分析需要像MapReduce一样的框架来向数十、数百

或甚至数千的电脑分配工作。

大数据需要特殊的技术，以有效地处理大量的容忍经过时间内的数据。适用于大数据的

技术，包括大规模并行处理（MPP）数据库、数据挖掘电网、分布式文件系统、分布式数

据库、云计算平台、互联网和可扩展的存储系统。

云计算和大数据两者之间结合后会产生如下效应：可以提供更多基于海量业务数据的创

新型服务；通过云计算技术的不断发展降低大数据业务的创新成本。

云计算与大数据区分在两个方面：

第一，在概念上两者有所不同，云计算改变了IT，而大数据则改变了业务。然而大数

据必须有云作为基础架构，才能得以顺畅运营。

先天下之忧而忧，后天下之乐而乐。——范仲淹

第二，大数据和云计算的目标受众不同，云计算是CIO等关心的技术层，是一个进阶

的IT解决方案。而大数据是