搜索引擎的设计与实现.docx

PAGE2

摘要

当前的网络发展特别的迅速，网络资源也是非常的丰富，各种各样的内容形成了特别庞大的网络数据，这庞大的数据用人工去检索所需要的信息是基本可能的，这就需要用到搜索引擎。搜索引擎主要在互联网中进行数据的搜索，发现，按照规则整理，最后为人类进行服务。

从搜索引擎的出现到现在，搜索引擎得到了极大的发展，人们非常的依赖搜索引擎来搜索引擎成为了人们获取自己需要的数据的重要途径。

通过研究搜索引擎的设计与实现，可以深入理解搜索引擎的设计原理，核心功能。

□□

关键词：网络技术搜索引擎数据库PythonPHP

Abstract

Thecurrentnetworkdevelopmentisparticularlyrapid,andthenetworkresourcesarealsoveryrich.Variouskindsofcontentformaparticularlyhugenetworkdata.Itisbasicallypossibletoretrievetherequiredinformationmanuallybythishugedata.Tothesearchengine.ThesearchenginemainlysearchesdataontheInternet,finds,organizesaccordingtorules,andfinallyserveshumanbeings.

Fromtheadventofsearchenginestothepresent,searchengineshavedevelopedtremendously.Peoplerelyheavilyonsearchenginestosearchenginesandbecomeanimportantwayforpeopletoobtainthedatatheyneed.

Bystudyingthedesignandimplementationofsearchengines,youcandeeplyunderstandthedesignprinciplesandcorefunctionsofsearchengines

□□

Keywords：NetworktechnologySearchEngineDatabasePythonPHP

目录

TOC\z\o1-3\u\h中文摘要 1

Abstract 2

第1章绪论 5

1.1选题的目的和意义 5

1.1.1选题目的 5

1.1.2选题意义 5

1.2选题的背景 5

1.3论文作者的主要工作 6

1.4论文的组织结构 6

第2章开发工具与相关技术 8

2.1爬虫 8

2.2全文搜索 8

2.3倒排索引 9

2.4开发工具——PyCharm 10

2.5开发语言——Python 10

2.6Web服务器——nginx 10

2.7PHP技术 10

2.8Sqlite数据库 10

2.9TF-IDF算法 10

2.10开发环境和开发工具 11

第3章系统分析 12

3.1可行性分析 12

3.2需求分析 13

3.3搜索引擎功能能模块划分 13

3.3.1搜索引擎角色分析 13

3.3.2搜索引擎模块分析 13

3.4搜索引擎用例图 13

3.5数据库的需求分析 14

第4章系统设计 15

4.1搜索引擎设计原则 15

4.2搜索引擎总体设计 15

4.2.1功能模块划分 15

4.3搜索引擎详细设计 16

4.3.1文档管理器详细设计 16

4.3.2索引构建器详细设计 16

4.3.3索引检索器详细设计 17

4.3.4网页查询模块详细设计 18

4.4数据库设计 18

第5章系统实现 19

5.1系统运行的软件环境 19

5.1.1系统协同工作原理 19

5.2文档管理器的实现 20

5.３索引构建器的实现 23

5.４索引检索器的实现 25

5.４网络查询模块的实现： 28

5.5系统测试 29

总结 30