基于云计算的电子政务大数据管理探索.docVIP

基于云计算的电子政务大数据管理探索 　　摘 要 　　本文从云计算和大数据概述入手，分析了云计算与大数据的关系，之后阐明了电子政务大数据管理的重要意义，最后以云计算为基础，探讨了电子政务大数据的管理模式，旨在更好的让电子政务数据服务于政府管理和相关服务工作。 　　【关键词】云计算 电子政务 大数据 管理 　　相关数据显示，政府部门集成数据占社会数据总量的九成以上，大数据时代下，政府部门数据呈现多样化的发展趋势，不仅涉及到在数据库存储的结构化数据，还涉及到大量的半结构化和非结构化数据，如何对电子政务数据进行有效的处理是当前政府部门工作的重中之重。基于以上，本文以云计算为基础，探讨了电子政务大数据管理的相关问题。 　　1 云计算与大数据概述 　　云计算是以互联网为基础的一种相关服务增加、使用和交付的模式，是并行计算、网络计算以及分布式计算融合发展的产物，其主要目的是通过互联网来更好的实现数据拓展、管理、计算和存储。 　　大数据是种类繁多、数量巨大以及类型复杂的数据，大数据的目的是挖掘海量数据中的信息和价值，其着眼于数据。电子政务大数据则指的是公务机构在管理和服务过程中产生的大数据。 　　2 电子政务大数据管理的意义 　　（1）大数据的包容性能够有效打破政府各部门之间以及政府与社会大众之间的信息壁垒，有效避免了信息孤岛现象发生，实现数据共享，为政府管理提供信息支持，提升政府管理能力和公共服?漳芰Α? 　　（2）对电子政务大数据的管理能够实现对社会舆情和相关危机的动态监测，并对其进行深入分析，这对于提升政府的危机预警能力和危机应对能力有着重要的意义。 　　（3）对电子政务大数据的管理能够转变政府决策模式，以实证为基础制定相关决策，对于提升政府的决策有效性和决策效率至关重要。 　　（4）对电子政务大数据的管理能促进数据的开放性和流动性，政府管理的过程中能够实现对大数据的深度挖掘和广泛应用，从而提升政府管理和公共服务的开放性与透明性。 　　3 基于云计算的电子政务大数据管理 　　传统电子政务数据管理主要为对数据的收集和存储，在云环境下，凭借着强大的云计算能力，能够实现对电子政务大数据的分析和挖掘，创新管理形式和管理模式，从而更好的让电子政务大数据服务于政府的管理和决策. 　　3.1 数据采集 　　电子政务大数据采集不仅涉及到政府机构内部大数据的采集，同时涉及到政府机构之间数据的采集，一般有分布式采集和集中是采集两种方式，二者有着各自的优点和缺陷，在云计算下，可以利用云计算分布式并行计算特点来将两种采集方式整合，提升电子政务大数据采集效率。将电子政务大数据集中式采集模式应用到政府机构内部，将电子政务大数据分布式采集模式应用到政府机构之间，将一定数量的中心服务器设置在政府机构内部，作为集中式数据注册机构，来存储共享数据，采用分布式数据采集模式来组织各个机构服务器。 　　上文中提到，电子政务大数据类型有着多样性的特点，因此需要以不同类型数据为基础进行云计算分布式采集，实现数据的分类存储。此外，可以借助云计算的扩展性和容错能力来实现相似数据或相同数据的同构化，借助几圈技术和虚拟化技术实现政府机构之间的对接和数据超级共享。 　　3.2 数据存储 　　在云计算下，采用列式存储方式来进行电子政务大数据的存储，以属性列为基础，将数据存储在列式数据仓库中，不同属性列数据分离开来，只需要查询属性列即可以实现数据投影，降低了系统损耗。在云计算列式存储模式下，相邻数据之间有着较高的相似性，压缩率较好，数据的压缩能够降低系统输出与输出的开销，这对于提升电子政务大数据仓库的管理性能有着积极的意义。 　　3.3 联机分析 　　联机分析处理是电子政务大数据管理的重要方面，其能够实现对数据的复杂分析和操作，从而为政府决策制定提供支持，其查询效果十分直观。基于云计算的联机分析从综合数据着手，能够提供多维模型和多维分析方法来进行多维数据分析，让政府决策者能够更加全面的对电子政务大数据进行分析。基于与计算的联机分析处理中的多维数据分析能够与数据仓库多维数据组织结合，互为补充，能够实现大量数值计算，实现海量电子政务数据的处理。 　　3.4 数据挖掘 　　联机分析能够获得数据表层信息，而对数据属性内在关系以及隐含信息的进一步揭示则需要依赖于数据挖掘，基于云计算的电子政务大数据挖掘以分布式并行挖掘技术为基础，相较于其他数据挖掘技术而言，基于云计算的分布式并行挖掘技术能够对大规模数据进行挖掘处理，其挖掘能力更强，消耗时间更短。其将机器群看做是硬件数据池，能够拆分并行任务，利用空闲机器来进行数据处理，这就能够有效提升对数据的计算效率，且数据的无关性能够促进计算集群的扩展。 　　3.5 数据可视化 　　电子政务大数据可视化是政府决策和管理服务