大数据在政府中的应用.pdf

大数据在政府中的应用--第1页

word格式-可编辑-感谢下载支持

大数据在政府中的应用

一、大数据的概念

大数据(bigdata)，或称巨量资料，指的是所涉及的资料量规模巨大到无法透过目前主流

软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助政府提供决策支持以及企

业经营决策更积极目的的资讯。

大数据可分成大数据技术、大数据工程、大数据科学和大数据应用等领域。目前人们谈

论最多的是大数据技术和大数据应用。工程和科学问题尚未被重视。大数据工程指大数据的

规划建设运营管理的系统工程；大数据科学关注大数据网络发展和运营过程中发现和验证大

数据的规律及其与自然和社会活动之间的关系。

大数据的4个“V”，或者说特点有四个层面：第一，数据体量巨大。从TB级别，跃升

到PB级别；第二，数据类型繁多。前文提到的网络日志、视频、图片、地理位置信息等等。

第三，价值密度低，商业价值高。以视频为例，连续不间断监控过程中，可能有用的数据仅

仅有一两秒。第四，处理速度快。1秒定律。最后这一点也是和传统的数据挖掘技术有着本

质的不同。业界将其归纳为4个“V”——Volume（数据体谅巨大），Variety（数据种类繁

多），Value（价值密度低），Velocity（处理速度快）。

海量数据存储、数据挖掘、图像视频智能分析，都是大数据的重要组成部分。

大数据的应用和发展离不开三大要素：

一是不同参与主体参与的大量数据信息（原材料基础）；

二是支撑大数据存储和运算的IT基础设施；

三是挖掘大数据潜在价值并进行应用的能力；

如果说云计算为数据资产提供了保管、访问的场所和渠道，那么如何盘活数据资产，使

其为国家治理、政府决策支持、企业决策乃至个人生活服务，则是大数据的核心议题，也是

云计算内在的灵魂和必然的升级方向。

二、大数据挖掘技术

大数据挖掘技术——是采用自动或半自动化的智能方式，从海量的数据中寻找隐藏在数

据中的模式、趋势和相关性。是从数据集中识别出有效的、新颖的、潜在有用的，以及最终

可理解的模式的非平凡过程。从这里发现的知识，应该是先前未知的，不能靠直觉发现的知

识，发现的知识要未知、实用和有商业价值。

它综合使用统计分析、数据仓库、人工智能、信息科学等多个学科的技术，从海量的客

户数据中找出传统经营分析难以洞察的客户行为模式，给出客户的详细描述，并可以有效预

大数据在政府中的应用--第1页

大数据在政府中的应用--第2页

word格式-可编辑-感谢下载支持

测客户的行为倾向。

数据挖掘的基本特征：

1、数据挖掘是在没有明确假设的前提下挖掘信息、发现知识；

2、数据挖掘所得到的信息应具有先前未知、有效和可实用性三个特征；

3、先前未知的信息是指该信息是预先未曾预料到的；

4、数据挖掘是要发现那些不能靠直觉发现的信息和知识，基本是违背直觉的知识和信

息；

5、挖掘出的信息越是出乎意料，就可能越有价值。

数据挖掘的完整步骤：

1、理解数据和数据的来源；

2、获取相关知识和技术；

3、整合和检查数据；

4、去除错误或不一致的数据；

5、建立模型和假设；

6、实际数据和挖掘工作；

7、测试和检验挖掘结果；

8、解释和应用；

三、政府对于大数据应用的相关政策或制度（大数据应用的环境）

对于向服务转型的我国政府来说，大数据对于政府信息化的核心价值是，能够打造出更

加透明的政府、更加智慧的政府、更加负责任的政府。

2012年3月，美国政府发布《大数据研究和发展倡议》，投资2亿美元发展大数据,用

以强化国土安全、转变教育学习模式、加速科学和工程领域的创新速度和水平；2012年7

月，日本提出以电子政府