垃圾邮件Bloom Filter过滤算法浅析.docVIP

垃圾邮件Bloom Filter过滤算法浅析 　　【摘要】本课题在对电子邮件原理和垃圾邮件的过滤方法进行分析研究的基础上，设计了一种垃圾邮件过滤算法，并实现了垃圾邮件过滤系统。这个系统基于Bloom Filter的LOAF技术，通过LOAF把收到的邮件初步分为从高到低的1，2，3三个可信度等级，1级表示是自己的好友发来的邮件，2级表示是跟自己好友有联系的人发来的邮件，1、2级邮件不可能是垃圾邮件。 　　本文主要介绍了Bloom Filter的基本原理及其实现。Bloom Filter是一种新的高效率的数据机构，是实现LOAF的基础。 　　【关键词】垃圾邮件过滤; Bloom Filter；LOAF; 　　中图分类号：F618.1 文献标识码：A 文章编号： 　　系统设计思路 　　随着垃圾邮件的泛滥，各种垃圾邮件过滤技术不断的出现和发展。通过对部分过滤技术的研究，我们设计并实现了这个系统。接下来我们看看系统工作的整个流程。 　　这个系统包括两部分，邮件发送端和邮件接收端。发送端的功能包括发送邮件、读取显示通讯录、添加联系人等。接收端的功能包括接收邮件、读取显示通讯录、邮件过滤、添加功能等。 　　Bloom Filter 实现的主要函数 　　1BFMembershipQuery()函数 　　 BFMembershipQuery()函数的功能就是判断一个元素是不是在Bloom Filter 数组中，如果是则返回1；不是则返回0。需要传递三个参数为：Bloom Filter 数组bf、带查询的元素element和元素长度length。 　　 首先，对element产生一个SHA1哈希函数地址。其次，与bf中的对应位进行比较。函数代码如下： 　　int BFMembershipQuery(BloomFilter *bf, const unsigned char *element, unsigned length) 　　{ int result = 1, i; 　　 //产生SHA1地址 unsigned *hashAddress = (unsigned *)malloc(sizeof(unsigned) * bf-Hash_Num); 　　 if (!GenerateHashAddress(element, length, bf-Length, bf-Hash_Num, hashAddress)) 　　 { free(hashAddress); 　　 return 0; 　　 } 　　 for (i = 0; i Hash_Num; i++) //对应位比较 　　 { if (!GetBits((unsigned *)bf-Bit_Array, hashAddress[i], 1)) 　　 { 　　 result = 0; 　　 break; 　　 } 　　 } 　　 free(hashAddress); return result; 　　} 　　2BFInsert()函数 　　BFInsert()函数实现把一个元素插入Bloom Filter 数组中，同样需要传递Bloom Filter 数组bf、带查询的元素element和元素长度length三个参数。 　　插入过程也比较简单，首先，对element产生一个哈希地址，然后把在bf中对应位置1，这样就完成了插入的操作，函数实现代码如下： 　　int BFInsert(BloomFilter *bf, const unsigned char *element, unsigned length) 　　{ 　　 int i; 　　 //产生SHA1地址 　　 unsigned *hashAddress = (unsigned *)malloc(sizeof(unsigned) * bf-Hash_Num); 　　 if (!GenerateHashAddress(element, length, bf-Length, bf-Hash_Num, hashAddress)) 　　 { 　　 free(hashAddress); 　　 return 0; 　　 } 　　 for (i = 0; i Hash_Num; i++) //对应位置1 　　 SetBits((unsigned *)bf-Bit_Array, hashAddress[i], 1, 1); 　　 free(hashAddress); 　　 return 1; 　　} 　　3Main()主函数 　　主函数的功能就是实现Bloom Filter 的初始化、判断以及插入。 　　在初始化这一步骤中，我们要设定Bloom Filter数组的