基于网络爬虫搜索引擎的设计与实现.docxVIP

设计(论文)题目： 基于网络爬虫搜索引擎的设计与实现 摘要 置身于信息大爆炸的时代之中，想要不被汗牛充栋的信息淹没，就必须要有很强的获取和甄别信息的能力，乘着互联网迅疾发展的东风，搜索引擎就这样应际而生了。而如何提升搜素引擎的效率和准确性就成了一个难关。 本系统从搜索引擎的原理、构成等方面入手，使用JAVA语言针对搜索引擎的核心部分：搜索器部分采用以crawler4j为主，jsoup为次的网络爬虫来达成抓取功能；索引器、检索器部分利用lucene来达成全文索引；用户接口部分基于SSH框架达成交互和界面的简练、活络。 并且本系统采纳多线程工作方式来加快爬虫爬取速度，同时基于md5算法对