基于大数据的社会治理数据集成及决策分析方法.pdf

基于大数据的社会治理数据集成及决策

分析方法

摘要：为了克服社区管理分布式数据整合复杂性和数据挖掘视觉性较弱的实

际问题，本文将提供一个分布式数据整合与可视化应用的方案。该方式采用了大

数据模型，将散布于各个互联网路径的数据库数据连接、提取与整合，实现挖掘

式统计分析，以提高数据信息动态表达与可视化管理能力，并进行面向服务对象

的智慧化社区管理决策分析和用。在此基础上，设计人员开发了一个原型系统并

完成了试运行。根据实践结果：该方案大大提高了数据挖掘集成的实时性、安全、

准确度以及研究的可视化，并且较传统模式更为简单。

引用：社区管理服务是基于大数据分析的复杂体系，包括了政法工作、综治

工作、社会维稳、人民来信来访、公安、司法、城管、等多种政府职能部门，以

及市、区、街道办事处（镇）、居民区（行政村）等多个系统的管理业务资源，

具有信息量大、变量层级多、单位构成差异大和动态性较高等特征。传统关系式

数据库在储存大数据集时缺乏稳定性、功能和成本的优势，同时在管理和检索大

数据集时更是力不从心，亟待面向大数据分析设计并优化数据储存、管理和检索

的新平台。

１设计原理与集成策略

社会管理统计涉及的大量构造化和非结构化数据，其特征是统计体积大、数

据类型和价值潜力大。把散落于社会各个领域的“人、地、物、情、事、机构”

的基本数据压缩、抽取、数据挖掘整合开来，形成了社会管理空间信息库、公共

服务数据库、行业信息库和人口信息库，形成了常态化的信息同步更新管理机制，

基于b／s架构的信息协同管理工作应用环境，实行图、文、表、管理工作流程

等统一的信息交互管理工作，创造了一种数据共享、快速反应的强大数据挖掘管

理平台，和常规的大数据仓库使用比较，具有信息量大、查找与分析复杂等优点。

平台将建立在各个不同部门分散的、异构的、专业的应用体系上，通过整合各类

静态数据、实时的安全监控资料以及多媒体流数据，在实现各业务体系独立工作

的基础上，提供社会管理信息监测数据、视频资料浏览服务、显示业务信息以及

智能化的决策分析等支撑手段。空间数据包含了电子地图、遥感影像、虚拟三维

物体等信息。公共数据包含了都市物件、城市设施、历史地标位置、政府管理组

织等的数据信息。而管理数据则是指管理事务数据信息，主要是与负责管理运转

的事务有关的数据信息，涉及信访、流转人数、治安、矫正帮教、治安预防、综

合执行等具体事项,和工作过程定义的事项布置、上报案例、综合评估指标等数

据。人口数据涵盖了实有人口数、监控群体、服务群体等，通过对全国社区管理

的重点群体和帮扶人群数据统一整合，构建全国动态总人口信息资源共享数据库，

实现了跨部门、跨层次、跨平台的全国人口统计信息共享共用服务［1］。

2.技术架构

２．1不同数据源接入与获取

数据源是数据集成的基础。从各专项信息服务系统群中的各种数据源中提取、

处理和加载数据，并根据相应的管理规范和技术标准，把数据添加到服务平台中。

平台接入部分则是由大量的服务和接口所组成，每个服务和接口都对应于一个具

体的主数据库。而数据源服务提供者则必须在页面上进行数据源的管理接入信息，

向服务中心注册。只有登录后的主数据库系统，才作为有效的主数据库系统。而

异相数据库系统接口则是指，利用接口和类实现链接的异相数据库系统数据源，

访问主数据库系统中的所有元数据。Ｗ数据源接入系统是指读出ｅ文档中的数据

信息，并连接到平台数据库系统中。当连接ｂ数据资源时，通过系统查询元数据

库中存放该x资源注册的样式表文段，并读出文档中的预定义模式，形成Ｗｅ

ｂ数据文件数据资源描述文件。

２．2规则驱动的决策分析

平台通过将来自于各个专项数据库中的数据通过相应的规则加以集成，对社

会管理全局数据实现了智慧化的深入数据挖掘与定量数据分析，在统一运行平台

上集中展示并对社会行业管理情况提出了专门决策分析与服务。平台集报告管理、

指标制定、模块搭建、多维展现，进行了全方位、多角度的社区管理进展状况与

发展趋势解析，有效提升事件反应能力与政策规划能力，内容涵盖了社区管理监

控预警、紧急指令管理、辅助决策保障等。监控预警指标主要是指经过对社会相

关数据多尺度数据挖掘，发现数据分析后面隐含的、可能存在的、变化不断的社

会关系和模式［2］，并进行对城市社会管理体征指标统计规律的研究，实现分

项、区域和时间综合展示，从而真实、动态地了解城市社会管理情况，并统计社

会管理执行状况，预计在未来一段时间的