互联网大数据解决方案.pdfVIP

互联网大数据解决方案 2015 年 3 月 一、 检察院综合查询系统方案说明 1 现状 a) 不同项目的查询，分别由独立的系统承担，且系统之间无联系，数据以 孤岛形式存在，仍需人工进行比对处理。 b) 因各类数据或信息孤立存在，不仅会增大数据查询的工作量与数据分析 人员的处理量，也会对数据分析人员的业务素质要求更高，使用成本较 高。 c) 因各类数据或信息孤立存在，在没有合适的工具时，分析人员仅能通过 视觉联系各类数据，难以发现数据之间存在的隐含信息。 d) 因各类系统数据模式、操作模式的不同，数据难以直接呈现和利用，也 不方便建立数据之间的关联性。 e) 各查询系统之间没有联系，对系统使用的安全性、方便性，特别是各系 统的运行维护等，都会带来一些困难。 2 系统目标 基于现状存在的诸多问题，综合查询系统需要提供完善的解决方案，提升分 析人员工作效率的同时，在系统应用、各孤立数据整合、数据使用、统一维护等 方面，形成高效易用、数据自动关联等的目标。 1) 打通路由，单点登录：利用网络 Vlan 划分，打通各独立系统之间的路由， 使有权限的人员通过综合查询系统，单点登录后用一个界面使用各孤立 系统的数据； 2) 分布式一键查询，数据整合：根据特定信息，综合查询系统分布式利用 接口查询各系统信息，并在查询返回后自动数据整合。 3) 数据自动关联：基于指定属性或特征，自动对数据进行关联。如时间、 地点、人员等属性的关联 4) 自动探测接口状态，统一监控各孤立系统的运行状态。 5) 利于流程的后期扩展：在使用单位需要加强系统使用流程时，可通过综 合查询系统方便直接扩展。如查询流程审批、查询审计、分级人员权限 控制、信息共享等扩展。 3 功能概述 3.1 打通系统联接 根据不同数据源单位的实际情况，采用路由打通、数据拷贝、专线联网等不 同的数据采集和交换方式。 系统依据保密要求，根据信息查询种类，分别对家庭、财产、通信、交通、 公安等信息进行查询。采用 VPN技术或独立 VLAN划分，打通各独立系统之间的 网络联接或通过数据拷贝方式实现逻辑连接。 3.2 单点登录 综合查询系统的单点登录，有两个作用： 1、是各孤立数据查询系统的数据联通的表现界面 2、使用者权限控制、审批流程控制与审计等管理功能扩展的控制点 使用者通过综合查询系统登录后，依据其权限，可使用各类数据查询系 统。查询权限一般可依据需求管理，可根据姓名、身份证等信息综合查询 所有查询以及查询生成的任务、数据等，都以任务方式存在在查询系统 中，以用于信息保存、信息共享、流程审计等 3.3 数据接口与标准化 各孤立系统为不同厂商不同时期分别独立建设，数据格式以及数据方式 各异，综合查询系统需要与每个子系统做数据接口，并对数据查询格式、数 据结果做标准化、结构化处理，以使数据能够综合处理，并可以依据标准结 构对数据整合关联。 3.4 分布式查询 因各查询平台独立建设，且相互之间没有连通性。综合查询系统打通与 各查询系统之间的接口后，需要采用分布式方式对需求数据分别查询，并对 查询结果依据数据流顺序整合数据，形成完整的查询数据信息。 查询输入查询条件后，如输入姓名、证件号码、电话、车牌号等信息， 综合查询系统后台通过接口，分别向各独立系统发起标准查询请求，并等待 各子系统返回数据。综合查询的数据同样遵循分布式的方式，可查看各类数 据的查询状态。已经返回的数据进入数据整合标准化处理后，直接呈现给查 询人员。 3.5 数据整合 数据整合分为： 1) 基础数据：此类数据位综合查询平台的内置数据库，存储与位置、热 点、IP 库、电话号码库等公共数据。 综合查询时能够使用这些基本数 据进行关联分析，对数据的周