大数据生态系统概念组成.pdfVIP

大数据生态系统概念组成

（一）大数据生态系统的提出

大树据时代已经到来，人们对于大数据对整个社会所起

到的推动作用已经逐步认识到，但大数据的应用需要整个系

统的运作，需要数据的获取渠道，数据的分析工具，数据分

享的平台，数据分析人员等。因此，大数据要得以应用发展，

必须建立大数据生态系统。随着大数据相关企业的迅速崛起

以及社会对大数据信息的需求推动，大数据产业正在逐步形

成一个完整的体系，从数据产生到数据输出的全过程，各个

环节环环相扣，这一过程称之为大数据生态系统。IBM架构

师对大数据生态系统进行了简单描述，提出大数据生态系统

就是数据的生命周期，即数据采集、存储、查找、分析和可

视化的过程。

（二）大数据生态系统的组成结构

CTOCTO发布的大数据生态图谱将数百家大数据公司和

IT企业从产品和商业模式划分为2种，从中我们可以看到大

数据的生态结构，以及其中各个环节的发展状况和市场热点)

从图谱上来看，大数据产业可以划分为*大类：大数据基础

设施大数据分析类大数据应用类大数据数据源类跨基

础设施分析开源软。大数据的概念目前被炒得非常火暴，

但大数据应用还不甚成熟，大数据市场仍处于初级阶段，但

大量的创业者已经涌入其中，不少企业经历了失败，但也有

不少企业取得了可观的成果。在竞争过程中，市场在逐步走

向整合，IT巨头在现阶段已经开始了收购大战，市场在竞争

中，逐步走向成熟，大数据的价值即将接受实践的检验。

（三）大数据生态系统的构建措施

大数据生态系统的构建对于企业的未来发展具有决定性

的作用，未来市场竞争将更趋于信息化科学化，企业决策将

依靠大量的量化信息。当然要建立大数据生态系统需要耗费

企业大量的资源，由于目前技术还不是很稳定，整个社会的

数据环境还不甚好，企业构建大数据生态系统存在较大的风

险)但提前做好准备，为未来搭建一个坚实的基础是很有必

要的。首先，要培养企业的数据文化，建立数据思维模式，

充分理解数据作为一种资源对企业的重要性。从发现问题，

查找数据，解决问题的思维，逐步转向使用数据进行预测，

找出最优实现方案的思维模式。

其次，开拓企业数据获取渠道，随着大数据时代到来，

企业需要收集的数据类型将不再局限于关系型数据，更多的

是非结构化的数据，例如电子商务网站、网上银行和外部社

交媒体网站等。将各种渠道的数据进行整合，突破传统数据

壁垒，构建企业全面的数据信息视图)最后，加强对数据资

源的管理，数据作为企业的资产，应对其进行维护，管理大

师汤姆彼得斯曾说过：一个组织如果没有认识到管理数据和

信息如同管理有形资产一样重要，那么它在新经济时代将无

法生存。因此，对于数据的管理，应与资产管理一样，能够

做到确认、计量、记录、归档、销毁。对于数据资源的确认

首先要对数据资产作出明确的定义及其确认标准，符合确认

条件的数据资源是能够引起经济利益流入的资产，在满足资

产的一般定义的情况下，同时要结合数据资源自身的特征。

其次，数据资源的确认要进一步细化，对其进行归类，分类

的标准多种多样，比如依据数据描述的对象进行初步分类，

之后再按照关系密切程度进一步分类等等。总之，按照企业

的业务需要，对数据资源在确认的基础上，进一步分类，既

有利于企业的数据资源的管理和核算，而且可以提高使用效

率。数据资源的计量是数据作为资产所必不可少的一步，对

此企业可建立自身的价值评估体系，对数据的价值加以衡

量。另外，信息技术的发展为大数据生态系统的建设带来了

广阔的前景。大数据生态系统构建过程中，一大难题是基础

设施的高投资额，这使得企业不得不考虑大数据生态能够为

企业带来多大的收益，然而目前大数据的应用还在初级阶

段，前景还不是很明朗的情况下，企业只能驻足观望。然而

云计算的发展，以及与此相关的云服务产业为这一难题的解

决带来了极大的可能性。云服务包括三个层级的服务，基础

设施服务、软件研发平台服务、租用基于web的软件服务，

云服务为未来大数据技术的应用提供了一种渠道，通过云服

务可以节省大量的资金，降低企业风险，提高使用效率。对

于小型企业，通过云服务可以在大数据时代获取更大的利

益。

（四）大数据处理生态系统构建

随着大数据和分析在企业应用的深入，面临的问题和挑

战也越来越多，主要有如下方面：第一，对大数据和分析平

台的企业级应用的可靠性、稳定性、安全性要求会越来越高；

第二，大多数企业级用户都面对着极为复杂的行业应用场

景，不同类型和来源的数据需要统一地被利用，在系