大数据技术在卡口系统联网方面的应用——基于Hadoop的卡口系统云计算联网平台改造设计及开发.pdfVIP

大数据技术在卡口系统联网方面的应用 一一基于Hadoop的卡1：3系统云计算联网平台改造设计与开发 口文／向庭波1刘树庄2何涛3向庭勇4 现状及改造背景 据技术(Hadoop技术)应用于该平台系统中，充分发掘 Lz市公安局卡口系统云计算联网平台于2013年建云计算系统的潜力，为卡口查询系统、DQB系统、交警 成并投入使用，在全国首次将云计算技术运用于卡口系 的缉查布控系统等应用提供各卡口系统的大数据快速 统联网中。系统的主要功能：实现了市局以及各县局各 查询服务。卡口系统云计算联网平台主要改造基本目标 自建设的不同厂家、不同品牌型号、不同结构的卡口系 如下：1、对现有平台进行扩充，使数据保存能力从十天 统的联网，并在此基础上实现卡口系统的数据整合。平 延长到半年；2、使计算能力在现有基础上提高一倍以 台自建成投人使用后，各项指标达到设计要求，有效的 上；3、增加一套基于云计算技术的数据库及相关大数 解决了全局市区及各县卡口系统的联网整合问题，目前 据工具软件，整合各卡口系统数据，并在此基础上由该 该系统运行正常稳定，在公安治安、刑侦、交通、情报等 联网平台提供统一数据查询、检索等应用服务，各厂商 各项业务信息化工作中发挥了重要的作用。 系统仅与联网平台对接；4、数据检索、查询响应时间小 由于该平台在当初设计时，为节省资金缩短研发建 于8秒。 设时间，仅设计了每个县局卡口数据保留十天的存储能 力，并且平台也只重点解决系统硬件及数据联网问题， 系统总体设计 系统的对接是由各厂商分别直接实施。随着公安各业务 系统改造在三个层面进行，第一个层面是对基础资 工作信息化的发展，各警种应用对海量卡口信息服务的 源的改造，主要是对云计算平台及存储系统软硬件进行 需求越来越大，该平台现有功能已不足以很好的适应新 扩容升级，提高运算速度扩大存储空间，并将之池化； 的应用要求，主要表现在如下方面：1、原平台设计存储 第二个层面是对平台系统软件的改造，主要是对软件及 容量较小，不足以支持长期的卡口数据存储查询；2、原 数据库系统进行升级扩展，增加一套基于Hadoop技术 平台数据由各卡口厂商直接对接整合，当其中一个卡口 的数据库系统，并确定接口标准，实现各县卡口数据的 系统升级后，必然使与之对接的所有卡口系统也要进行 统一存储与查询，提高查询检索的速度和稳定陛；第三 数据修改，影响了系统的稳定运行；3、原平台采用的是 个层面是对软件服务的改造，一是对原有数据接收服 传统数据库，进行海量数据查询时等待时间较长。 务器进行改造，增加统一数据库接口并确定接口标准， 随着技术的发展，各警种的应用对卡口数据查询 二是通过统一数据服务接口，向省公安厅卡口联网、交 等提出了新的需求，为了解决上述问题，需要对原有卡 警查缉布控、市局卡口、电子警察等系统应用提供各县 口联网平台进行升级改造以适应新的应用需求。—方面 卡口的数据服务，并为未来升级留下接口模块，系统总 提升平台的计算存储能力，另—方面通过升级，将大数 体架构示意图如图1： corn 第四届深圳国际智能交通与卫星导航位置服务展览会(20156深圳会展中心)wwwiIS—expo 45 万方数据 FOCIysINDUSTRY 9聚焦·产业I l曹．： 平台改造总体功能设计