基于海量信令数据的区域监控系统设计与实现.docVIP

基于海量信令数据的区域监控系统设计与实现 　　摘要：在移动通信设备普及的时代，充分利用起每日产生的庞大电信数据，为区域管理分析领域提供便利非常有必要。本系统利用大数据技术，将信令数据中的位置信息及其他相关信息进行获取和分析，获得区域内人员信息。本文给出了比较完整的区域监控和搜索的设计方案，并通过进一步实现，证明了方案的可行性。 中国论文网 /8/view-7184410.htm 　　关键词：大数据；信令；区域监控 　　中图分类号：TP311 　　文献标识码：A 　　DOI：10.3969/j.issn.1003-6970.2015.09.020 　　0 引言 　　近年来，反恐维稳的形势日益严峻，对敏感区域的监控和分析随之变得越发重要。对于区域监控，国内应用比较广泛的是视频监控系统，即硬件视频设备和软件平台相结合。但监控区域受视频监控硬件设备限制，成本高，灵活度不高。 　　随着智能手机的普遍应用，“人手一机”已成为现实，随着技术的进步，如今电信运营商通过移动终端采集的位置数据实时性得到增强。信令数据具有实时性强，范围广，成本较低的特点，因此通过运营商基站数据来监控分析某一区域内人员情况有较高的性价比。 　　在通信领域，早在2008年，中国移动委托国家ITS中心组织并实施了的“基于手机位置采集实时交通信息科研项目”试验，作为相关领域的全国首次大范围尝试，此试验验证了基于手机位置切换采集实时信息的可行性。国内也有相关研究工作，韩鲁峰等。结合基站信息获取“三角公式法”，研究并提出了一种消除位置偏移算法。任旭提出了一种使用A接口信令数据生成实时交通数据的方法。提出了一种使用现网移动网络信令数据源，实时的对城市白定义区域实现人流量监测的方法。通过调研可知，已有文献多偏重于理论研究，有一些基于信令分析的系统应用研究主要用于人流分析，人流管理等方向，功能局限于人数统计，消息推送等，未能将人流量与获取区域内人员具体信息相结合，功能较单一。随着大数据技术的发展，将大数据技术应用与这些统计方法相结合，进行移动信令的监测统计，并建立起预警系统，还有较大的发展空间。 　　l 建设目标 　　本论文旨在设计与实现一个以海量信令数据为数据源，基于大数据技术的人员信息监控分析平台，以实现任意时间，任意区域内的人员信息的实时监控，历史监控数据查询等功能。 　　相对于已存在的区域监控类系统，本系统主要有以下优势： 　　1）任意区域的监控及查询。基于普及建设的运营商基站，可任意设定监控区域范围，附加的成本较低。 　　2）数据精准详细。本系统采用的信令数据覆盖人员范围大，并且利用起电信数据中的人员信息，可为刑侦等合法领域提供有效的监控信息。 　　2 关键问题 　　本论文的研究目标是根据移动信令数据实现对某一区域的监控分析，通过解决移动信令到位置信息的转换、分析监控区域对应基站位置等关键问题，完成基于移动信令的区域监控大数据分析系统的设计与实现。 　　本论文所涉及的关键问题分析及解决方案如下： 　　2.1 信令数据源的获取 　　本系统的数据来源是移动信令数据，从何种信令流程中获取到系统所需的包含位置信息的信令，成为本论文研究的首要关键问题。 　　GSM核心网的基站控制器（BSC）与移动交换中心（MSC）之间的A接口主要负责传递呼叫处理、移动性管理、基站管理、移动台管理等信息，并且A接口具有统一公开的标准，便于生产和组网，因此，本系统选择获取包含位置信息的A接口信令。 　　下面就GSM网和CDMA网分别描述能够获取到位置信息和号码信息的信令流程 　　G网中A接口位置如图1所示： 　　G网中位置更新流程包含了位置更新类型，IMSI，主叫CEELID，时间等消息，具体流程如图2所示： 　　位置更新过程主要采集的消息如表1所示： 　　在A接口上加装信息探测设备，即可获取到包含位置信息的信令，并将数据用分隔符分割，以txt文件的形式实时传输到系统存储单元。这种信息探测监听方式，是一种被动的监听方式，附加成本小，不影响已有移动通讯网络的正常运行，不会增加额外的网络负荷。 　　2.2 对信令数据实时收集和分发 　　本系统希望能够实时的对区域内人员情况进行分析和监控，故对数据的采集要求具有实时性。而且本系统要做到对历史记录的查询，又需要对实时采集的数据进行及时的存储。如何实时的对数据源进行采集分发是本系统的实现的基础及关键问题之一，通过调研使用Flume软件来可以对数据做到实时的收集和分发。Flume是实时流处理中常用的实时获取数据的软件，可以做到对数据的实时获取，实时传输，通过配置不同的source可以对多源头的数据进行监测，然后通过配置不同的sink将数据输出到不同的位置，本系统通过配置source，实时监测已配置文件夹下数据的变