2025年前瞻大数据建设及对项目的支撑 .pdfVIP

好学近乎知，力行近乎仁，知耻近乎勇。——《中庸》

第五章前瞻大数据建设及对项目的支撑

随着社会的高速发展，大数据已经成为引领社会变革的关键因素，

对于很多行业而言，如何利用好大数据是赢得竞争的关键。要做好项

目的运营，对大数据的理解和运用尤为重要。

本章将细致阐述大数据的发展与应用，以便于分析在项目运营

中大数据利用的最佳方式。

5.1大数据基本概念

巨量资料(bigdata)，或称大数据、海量资料，指的是所涉及的

资料量规模巨大到无法透过目前主流软件工具，在合理时间内达到撷

取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。

大数据的4V特点：Volume、Velocity、Variety、Veracity。“大数据”

是由数量巨大、结构复杂、类型众多数据构成的数据集合，是基于云

计算的数据处理与应用模式，通过数据的整合共享，交叉复用,形成

的智力资源和知识服务能力。

大数据的特征通常表现为以下四个方面：

丹青不知老将至，贫贱于我如浮云。——杜甫

1）、截至目前，人类生产的所有印刷材料的数据量是

200PB(1PB=210TB)，而历史上全人类说过的所有的话的数据量大约

是5EB(1EB=210PB)。当前，典型个人计算机硬盘的容量为TB量级，

而一些大企业的数据量已经接近EB量级。

2）、这种类型的多样性也让数据被分为结构化数据和非结构化

数据。相对于以往便于存储的以文本为主的结构化数据，非结构化数

据越来越多，包括网络日志、音频、视频、图片、地理位置信息等，

这些多类型的数据对数据的处理能力提出了更高要求。

3）、价值密度的高低与数据总量的大小成反比。以视频为例，

一部1小时的视频，在连续不间断的监控中，有用数据可能仅有一二

秒。如何通过强大的机器算法更迅速地完成数据的价值“提纯”成为

目前大数据背景下亟待解决的难题。

4）、这是大数据区分于传统数据挖掘的最显著特征。根据IDC

的“数字宇宙”的报告，预计到2020年，全球数据使用量将达到35.2ZB。

在如此海量的数据面前，处理数据的效率就是企业的生命。

从技术上看，大数据与云计算的关系就像一枚硬币的正反面一样

密不可分。大数据必然无法用单台的计算机进行处理，必须采用分布

式计算架构。它的特色在于对海量数据的挖掘，但它必须依托云计算

百川东到海，何时复西归?少壮不努力，老大徒伤悲。——汉乐府

的分布式处理、分布式数据库、云存储和/或虚拟化技术。(在维克托·迈

尔-舍恩伯格及肯尼斯·库克耶编写的《大数据时代》中大数据指不用

随机分析法（抽样调查）这样的捷径，而采用所有数据的方法）大数

据的4V特点：Volume（大量）、Velocity（高速）、Variety（多

样）、Value（价值）。

早在1980年，著名未来学家阿尔文·托夫勒便在《第三次浪潮》

一书中，将大数据热情地赞颂为“第三次浪潮的华彩乐章”。不过，

大约从2009年开始，“大数据”才成为互联网信息技术行业的流行

词汇。美国互联网数据中心指出，互联网上的数据每年将增长50%，

每两年便将翻一番，而目前世界上90%以上的数据是最近几年才产

生的。此外，数据又并非单纯指人们在互联网上发布的信息，全世界

的工业设备、汽车、电表上有着无数的数码传感器，随时测量和传递

着有关位置、运动、震动、温度、湿度乃至空气中化学物质的变化，

也产生了海量的数据信息。