- 19
- 0
- 约8.81千字
- 约 91页
- 2019-11-04 发布于浙江
- 举报
搜索引擎的使用与翻译
1、什么是搜索引擎?
2、搜索引擎的工作机制
3、基本检索技术
4、Google搜索
5、Google在翻译中的应用示例
6、以图搜图
7、桌面搜索
8、作业
1、什么是搜索引擎?
搜索引擎(search engine)指根据一定策略,运用特定的计算机程序从互联网搜集信息,完成信息组织、处理后为用户提供检索服务,并将检索信息展示给用户的系统。
搜索引擎包括全文索引、目录索引、元搜索引擎、垂直索引引擎、集合式搜索引擎、门户搜索引擎、免费链接列表,等。
谷歌(Google)与百度(Baidu)是代表性搜索引擎。
2、搜索引擎的工作机制
现代大规模、高质量搜索引擎一般有爬行、抓取存储、预处理、排名四个步骤。
(1)爬行
搜索引擎通过一种特定规律的软件跟踪网页链接,从一个链接爬到另一个链接,像蜘蛛在蜘蛛网上爬行一样,所以也称为“蜘蛛”或“机器人”。
搜索引擎蜘蛛按照一定规则爬行,并非胡乱爬行。
(2)抓取存储
搜索引擎蜘蛛跟踪链接,爬行到网页后,将爬行数据存入原始页面数据库。其中页面数据与用户浏览器得到的HTML完全一样。搜索引擎蜘蛛在抓取页面时,也做一定的重复内容检测,一旦遇到权重很低的网站上有大量抄袭、采集或复制内容,很可能不再爬行。
(3)预处理
搜索引擎蜘蛛将抓取的页面按照如下步骤进行预处理:
抓取文字→中文分词→去停止词→消除噪声→正向索引→倒排索引→链接关
原创力文档

文档评论(0)