搜索引擎：原理、技术与系统.pdf

[General Information] 书名=搜索引擎：原理、技术与系统 作者=李晓明 闫宏飞 王继民著 页数=248 SS号 DX号= 出版日期=2005年04月第1版 出版社=科学出版社 书名 前言 目录 前言 第一章 引论 第一节 搜索引擎的概念 第二节 搜索引擎的发展历史 第三节 一些著名的搜索引擎 上篇 Web搜索引擎基本原理和技术 第二章 Web搜索引擎工作原理和体系结构 第一节 基本要求 第二节 网页搜集 第三节 预处理 第四节 查询服务 第五节 体系结构 第三章 Web信息的搜集 第一节 引言 一、超文本传输协议 二、一个小型搜索引擎系统 第二节 网页搜集 一、定义URL类和Page类 二、与服务器建立连接 三、发送请求和接收数据 四、网页信息存储的天网格式 第三节 多道搜集程序并行工作 一、多线程并发工作 二、控制对一个站点并发搜集线程的数目 第四节 如何避免网页的重复搜集 一、记录未访问、已访问URL和网页内容摘要信息 二、域名与IP的对应问题 第五节 如何首先搜集重要的网页 第六节 搜集信息的类型 第七节 本章小结 第四章 对搜集信息的预处理 第一节 信息预处理的系统结构 第二节 索引网页库 第三节 中文自动分词 第四节 分析网页和建立倒排文件 第五节 本章小结 第五章 信息查询服务 第一节 查询服务的系统结构 第二节 检索的定义 第三节 查询服务的实现 一、结果集合的形成 二、查询结果显示 第四节 本章小结 中篇 对质量和性能的追求 第六章 可扩展搜集子系统 第一节 天网系统概述和集中式搜集系统结构 一、天网系统结构 二、集中式搜集系统 第二节 利用并行处理技术高效搜集网页的一种方案 一、节点间URL的划分策略 二、关于性能的讨论 三、性能测试和评价 四、系统的动态可配置性设计 第三节 本章小结 第七章 网页净化与消重 第一节 网页净化与元数据提取 一、引言 二、DocView模型 三、网页的表示 四、提取DocView模型要素的方法 五、模型应用及实验研究