Web挖掘技术在搜索引擎中的应用.pdfVIP

2009年第6期 齐齐哈尔师范高等专科学校学报 No．6，2009 (总第 112期) JournalofQiqiharJuniorTeachers’CoHege Genera1．NO．112 Web挖掘技术在搜索引擎中的应用 于海涛 (黑龙江省鹤城建设投资发展有限公司。黑龙江 齐齐哈尔 161000) 摘 要：本文针对 目前搜索引擎存在的不足，充分研究了个性化搜索引擎的发展现状，设计并实 现了一种个性化搜索引擎，同时提出了一种查询语句优化策略，在此基础上，又对基于语义Web 的搜索引擎进行了研究探索。 关键词：数据挖掘；Web挖掘；搜索引擎 中图分类号：TP393．092 文献标识码：A 文章标号：1009—3958(2009)06—0050—02 TheApplicationofW ebM ininginSearchEngiRe YU Ha1-tao (HeilongjiangProvinceHechengConstructionInvestmentandDevelopmentCo．，Ltd．，Qiqihar，Heilongjiang，161000，china) Abstract：，Thisarticlepaysgreatattentiontotheshortcomingsincurrentsearchengine，andfullystudiesthedevelopmentof pe~onalizedsearchengine，designingandimplementingapersonalizedsearchengine．Thisarticlealsoproposesaqueryoptimizadon strategies．ItalsodiscussesSemanticwebSearchEngniebased0nqueryopdmizadonstrategies． KeyWOrds：datamining；Webmining；searchengine 一 、 引言 与之相关的Web页面外，还希望所检索到的页面具有高质 Web已成为人们获取信息的一个重要途径 ，随着Web 量，或针对该话题具有权威性。为此，Kleinberg提出一个链 信息的日益增长，人们不得不花费大量的时间去搜索浏览自 接到许多权威站点的站点叫做中枢 (Hub)；被许多中枢链接 己需要的信息。搜索引擎随之成为人们最普遍使用的信息检 的站点叫做权威 (authority)。一个中枢就是一个或一组网页， 索的工具。该工具涉及信息检索、数据库、数据挖掘、人工智 它提供向权威网页的链接。这样的枢纽网页本身或许并不重 能、分布式处理、自然语言处理等多个领域的理论和技术 ，因 要，或者很少有链接指向它们。但是枢纽网页提供了指向围 而具有综合性和挑战性。但是，目前大多数的搜索引擎提供 绕某一主题的重要网页的有关链接。 的服务还不能令用户满意，尤其是个性化的查询请求。因此， 此类网页可以是主页上的推荐链接列表，例如一门课程 个性化搜索引擎成为当前的一个重要研究课题。 主页上的推荐参考文献站点，或商业站点上的相关信息站 对于搜索引擎而言，通过借鉴Web挖掘技术，可以提高 点。Hub页面起到了隐含说明某权威页面的作用。好的Hub 查准率和查全率 ，改善检索结果的组织 ，增强检索用户的模 是指向许多好的权威的页面；好的权威是指由许多好的hub 式研究，从而使得检索效率得到改善。Web挖掘技术主要在 所指向的页面。这种Hub与authoriyt之间的相互作用，可用 以下几个方面对搜索引擎有借鉴作用： 于权威页面的挖掘和高质量Web结构及资源的自动发现。 1)自动摘要的形成