基于Java平台的网络资源搜索系统的设计与实现-软件工程专业论文.docxVIP

独 创 性 声 明 本人声明所呈交的学位论文是本人在导师指导下进行的研究工作 及取得的研究成果。据我所知，除了文中特别加以标注和致谢的地方 外，论文中不包含其他人已经发表或撰写过的研究成果，也不包含为 获得电子科技大学或其它教育机构的学位或证书而使用过的材料。与 我一同工作的同志对本研究所做的任何贡献均已在论文中作了明确的 说明并表示谢意。 签名： 日期： 年 月 日 论 文 使 用 授 权 本学位论文作者完全了解电子科技大学有关保留、使用学位论文 的规定，有权保留并向国家有关部门或机构送交论文的复印件和磁盘， 允许论文被查阅和借阅。本人授权电子科技大学可以将学位论文的全 部或部分内容编入有关数据库进行检索，可以采用影印、缩印或扫描 等复制手段保存、汇编学位论文。 （保密的学位论文在解密后应遵守此规定） 签名： 导师签名： 日期： 年 月 日 摘要 摘 要 当今社会信息技术的日新月异，互联网络发展一日千里，如何在这样大规模 的网络信息中快速和准确地找到人们所需要的信息成为人们使用互联网时所面临 的一个问题。这种背景下产生了搜索引擎。 本文从企业级应用出发，设计一种适用于企业办公的网络资源搜索系统。该 系统能够根据企业需求，获取指定的网址及其内部超链接中的内容，并建立索引 库，将信息保存在本地的磁盘上。文章的主要内容如下： （1）分析了目前主流的搜索引擎的执行过程，包括建立索引库的过程和从索 引库中查询的过程。 （2）设计并实现了基本的系统管理功能。作为一个软件核心基础模块，系统 管理实现了对系统中用户的管理、登录和权限认证的功能。 （3）设计并实现了网络资源搜索系统中的网页获取功能。该模块可以根据入 口地址、搜索深度和各种过滤条件从互联网上获取网络资源，并持久化进索引库。 （4）设计并实现了网络资源搜索系统中的信息分析功能。该模块负责处理搜 索的信息，将通过这些信息提取出的结论保存进数据库中，并可以使用图表直观 的显示结论。 （5）设计并实现了网络资源搜索系统中的本地查询功能。该模块与目前主流 搜索引擎类似，在本地索引库中搜索和关键字匹配的记录。 （6）使用 Spring 技术将 Struts2 框架、Hibernate（JPA）框架、Compass 框 架、整合起来，实现了事务的声明式管理和层与层之间的依赖注入。使得整个系 统在具有很好的架构的同时，减少了重复代码，降低了模块之间的耦合的，便于 系统的维护与更新。 （7）使用 Junit4 技术，对所有持久层的代码进行了单元测试，在此基础上， 编写前端业务逻辑，并使用功能测试验证程序的可行性。通过软件测试确保了系 统的可靠性和合理性。 本文实现的系统，可以部署在 Web 服务器上运行。该系统提供了搜索引擎的 基本功能，能够满足企业的实际需求。 关键词： 网页获取，搜索引擎，Java 平台，Compass 技术， I ABSTRACT ABSTRACT Information technology rapidly changes in todays society, and the Internet developments leaps and bounds. How to quickly and accurately find the information that people need in such a large scale network when people use the Internet become a problem. Search engine is produced in this background. From the enterprise-class application, this paper designs a network resource search system which joint with the business office. According to business needs, the system can access to the specified URL and capture the contents of the url and its internal hyperlinks. Then the system creates index databases, and stores the information in the local disk. The main contents of the article are as follows: This paper analyzes the execution of the current mainstream search engines,