公安大数据应用研究.docx

????

???

公安大数据应用研究

???

?

?

?

?

?

?

???

???

?

???

?

?

?

?

?

?

?

一、引言

信息技术革命与经济社会活动的交融催生了大数据。2015年8月，印发了《促进大数据发展行动纲要》，把大数据作为基础性资源，全面实施数据强国战略，加快推动数据资源共享开放和开发应用，助力产业转型升级和社会治理创新。与此同时，我国公安信息化建设发展迅猛，公安市场大规模的信息化和装备投资产生了海量的结构化和非结构化数据，包括轨迹信息、工作信息、多媒体信息等。据不完全统计，截至2015年底，全国公安机关掌握的数据资源已达数百类、上万亿条、EB级的大数据规模。同时，数据产生汇集的速度越来越快，数据呈阶梯式增长。目前，公安数据的年增长率超过50%，增长速度远超以往任何时期。公安数据既有传统的结构化数据，也有大量文档、图片、视频、栅格、矢量、文本等非结构化数据，数据结构、存储方式多种多样。公安数据中蕴藏着人、事、物、组织和案件等丰富的信息，充分利用这些信息，挖掘海量数据背后隐藏的关联关系，对于维护社会大局稳定、预防和打击犯罪、辅助指挥决策都具有重要的价值。

各级公安机关快速积累并不断增长的信息数据已成为继警力资源、装备资源之后的新一类核心资源。如何有效利用海量信息并挖掘内在更大的价值，成为提升公安实战应用能力、建立立体化综合防控体系面临的重大难题。政法委书记孟建柱同志指出“谁率先拥有、善于利用大数据，谁就能掌握主动、赢得未来”，郭声琨部长也强调“要大力加强大数据时代公安基层基础工作，不断提高维护公共安全和服务人民群众的能力水平”。公安信息化“十三五”规划已将云计算、大数据等新技术应用作为优化基础性技术设施、提升信息化支撑能力的重要建设内容。

二、大数据相关概念

大数据是以容量大、类型多、存取速度快、应用价值高为主要特征的数据集合，正快速发展为对数据巨大、来源分散、格式多样的数据进行采集、存储和关联分析，从中发现新知识、创造新价值、提升新能力的新一代信息计算和服务业态。

大数据的特点可以用4个V来概括：第一，Volume，数据体量巨大，从TB级别，跃升到PB级别；第二，Variety，数据类型繁多，包括网络日志、视频、图片、地理位置信息等等；第三，Value，价值密度低，以视频为例，连续不间断监控过程中可能有用的数据仅仅有一两秒；第四，Velocity，处理速度快，在数据量非常庞大的情况下，也能够做到数据的实时处理。最后这一点也是和传统的数据挖掘技术有着本质的不同。这4个V对应了大数据领域中核心的4类技术，即大数据存储、大数据治理、大数据挖掘、大数据计算。随着近年来技术的发展，为大数据的处理提供了可能，也为公安工作思路创新提供了新机遇。

三、公安大数据平台架构

公安大数据应用是基于云计算平台构建基于全警采集、全警共享的统一的大数据平台，为实现智慧警务提供核心支撑能力。公安大数据平台架构如图1所示。

公安大数据平台分为接口数据层、数据汇聚层、数据库资源池、共享服务层、数据应用层、门户层六大层次。

接口数据层：提供公安内部数据、社会采集数据的接口引进管理。

数据汇聚层：提供社会数据、公安内部数据的采集交换、加工整合和数据治理功能。

数据库资源池：建立各类数据资源整合加工的成果存储管理机制，提供临时缓冲库、数据标准化库、细节沉淀库，以及衍生数据库和资源应用库。

共享服务层：提供数据资源的统一共享和服务管理功能，包括服务接口、接口配置功能、服务资源目录、资源服务总线和服务资源监控等功能。

数据应用层：资源应用层主要包括：综合查询、搜索引擎、数据比对、布控预警、分类统计等常用功能，以及趋势分析、异常分析、相关性分析等挖掘功能。

门户层：提供单点登录、应用导航、信息发布、交流反馈等功能，并实现与外界的统一交互。

四、公安大数据建设主要内容

（一）公安大数据资源规划

当前，经过金盾工程建设与应用积累，公安已经沉淀了海量数据资源，建立了多个实战业务应用系统，以资源整合共享理念为基础，建立了资源服务平台，形成了公安八大资源库。由于业务需求和业务理解不同，各业务应用系统中存在同名数据项实际业务含义不同，同业务含义的数据项名称不同，同义数据项的数据类型、长度等格式定义存在差异等情况，造成公安信息资源共享、关联应用的困难。

制定统一的公安信息资源目录体系和公安元数据标准，搭建信息资源服务平台，从源头上规范数据采集、整合和共享服务；基于业务属性开展人员、物品、案件、地址、组织、服务标识等主题域模型的细化设计，对数据进行科学、合理、标准的规划；建立数据逻辑集中、物理分布，全景逻辑一体化应用的公安大数据体系，是公安大数据发展的基石。

（二）公安大数据汇集

依托公安云计算环境的建立，通过公安内部数据接口实现与网综平台