云计算短信内容审计研究(共3571字).docVIP

云计算短信内容审计研究(共3571字) 1引言 开发完善的垃圾短信过滤系统一直是电信运营商和学术界研究的重点。随着手机用户数量的增长，垃圾短信数量也呈现出爆炸增长的势头，使得广大消费者长时间饱受垃圾短信的骚扰。垃圾短信不仅占用了有限的网络资源，造成运营商投入更多的人力、物力资源对其进行处理，而且以欺诈为目的的短信使很多用户损失大量财产。目前用户投诉总量的30%以上都是针对垃圾短信，因此电信运营商有义不容辞的责任抑制垃圾短信蔓延。中国移动、中国联通和中国电信公司推出了过滤垃圾短信专用客户端。主要做法是根据发送号码特征及语义特征自动过滤垃圾信息，将要过滤的号码加入短信黑名单。而针对号码特征及语义特征过滤受到手机的存储和运算能力的限制，还需要进一步的改善。即使使用传统的服务器来分析并将发送源号码屏蔽，也由于垃圾短信数据量呈现指数级的增长使得分析垃圾短信变得越来越慢，无法实时对发送垃圾短信的号码起到屏蔽的作用。云计算作为一种全新的IT服务模式，将其应用到垃圾短信的过滤中，不仅提供几乎无限的存储空间，使得数据存储和管理能够顺利的完成，而且提供了无限强大的计算能力，使得在超大规模的数据中实时挖掘出有用的数据成为可能。云计算的这些特点正好弥补手机和传统服务器的不足，为过滤垃圾短信提供了必要条件。总之，垃圾短信的泛滥使人们的日常生活受到了严重的影响，已成为一种社会危害，治理垃圾短信势在必行。［1］ 2云计算的关键技术 2．1数据存储技术 云计算采用分布式存储来存储数据保证了高可用、高可靠和经济性;为同一份数据存储多个副本的冗余存储方式保证存储数据的可靠性。云计算的数据存储技术必须具有高吞吐量和高传输率的特点，因为云计算系统能够并行地为大量用户提供服务来同时满足超大规模用户的需求。本文所采用的云计算的数据存储技术采用Apache开源组织的一个分布式计算开源框架Hadoop，HDFS(HadoopdistributedFileSystem，Hadoop分布式文件系统)作为Hadoop的核心技术之一，HDFS是分布式计算中数据存储管理的基础。它所具有的高容错高可靠性、高可扩展性、高获得性、高吞吐率等特征为海量数据提供了不怕故障的存储，为超大数据集(LargeDataSet)的应用处理带来了很多便利。HDFS放宽了一部分POSIX约束，来实现流式读取文件系统数据的目的。因此，超大规模的数据存储、数据加密和安全性保证以及提高I/O速率等方面将是云计算的数据存储技术未来的主要发展方向。 2．2编程模型 云计算要求编程模型必须相当简单的原因是让用户能够轻松享受云计算带来的各种服务，特定的功能可以通过用户利用该编程模式编写简单的程序来实现，同时用户和编程人员无需对后台复杂的并行执行和任务调度的细节进行了解，只需了解如何调用相应的接口。Map—Ｒeduce是目前云计算大量采用的编程模式，用于大规模数据集(大于1TB)的并行运算。它极大的方便编程人员在不会分布式并行编程的情况下，将自己的程序运行在分布式系统上。它的实现是map函数和Ｒeduce函数组成，基于Map—Ｒeduce的编程思想已被大部分的IT厂商采用来实现自己的编程模式。 3系统的设计 网络侧处理垃圾短信力有不逮，以往从客户端限制垃圾短信的方式又存在缺陷，比如黑白名单技术，由于垃圾短信发送号码一直改变而收效甚微;关键字技术让所有用户都能准确到位的表达需求又不现实。因此，必须要有一个技术手段去解决问题，而如果能将“政策+技术”、“云+端”结合的模式来保障手机安全，将会起到事半功倍的效果。在技术层面，以往应对垃圾短信问题往往在于“云”的角度，但实际上垃圾短信最终都体现在手机上，用户的参与至关重要———必须由“端”去识别这些垃圾短信。这就决定了只有通过“云+端”的结合才能在技术层面取得突破，首先用户对垃圾短信进行举报，“云”把大量用户上报的内容，使用HA-DOOP的MAP－ＲEDUCE统计分析，定位问题，然后把它变成策略，最终分发到所有用户的手机上。可以说，在“云+端”的模式中，所有的用户都是系统的一部分，在为系统贡献支持的同时，也分享了解决方案。系统的处理流程为:手机终端用户将自己认为是垃圾的短信和垃圾短信发送的手机号码通过通信接口上报到云端过滤平台，云端利用规则挖掘引擎判断此短信是否为垃圾短信，若是则赋予垃圾短信的发送手机号码一定的阀值。假如垃圾短信发送的手机号码达到了规定的阀值，则将发送垃圾短信的源号码通过接口程序发送到移动侧的短信中心和BOSS系统，移动侧可以直接将垃圾短信发送的手机号码拦截或者通过人工审核再进行拦截，被拦截的手机号码则失去短信发送功能，通过以上流程可以真正的过滤掉垃圾短信。 3．1手机系统设计