基于反向链接结合超链文本分析的定题搜索算法.docxVIP

  • 4
  • 0
  • 约5.65千字
  • 约 6页
  • 2023-09-06 发布于广东
  • 举报

基于反向链接结合超链文本分析的定题搜索算法.docx

基于反向链接结合超链文本分析的定题搜索算法 1 定题搜索技术 今天的世界是信息的世界。网络信息资源正在迅速扩张。如何快速检索和获取信息的需求信息已成为信息披露的最基本问题之一。网络搜索引擎在网络信息资源查找中起到了重要的作用,它可以帮助人们从数以亿计的网络信息中找到自己想要的信息。数据采集robot是搜索引擎的信息搜索代理,它顺着超链接在网络上爬行且将搜索到的网页存储到数据库中。搜索引擎依靠robot的帮助获取大量的网页来进行索引以供用户查询。 目前常见的综合型搜索引擎优点是用户可以查到范围很广的信息;不足之处在于由于其涉及领域太广,因此在某些特定领域的查询上则不够深入和专业化。针对这种状况,人们提出了对某一专题的定题搜索引擎,它可以在某些小范围的领域取得比综合型搜索引擎更满意的结果,满足了某些特定用户的需要。采用定题搜索算法的Robot 程序仅对给定主题相关的网页文档进行搜集,搜索算法在访问页面之前进行预测分析,能识别出这些页面是否与主题相关,决定是否采集或者制定采集的优先顺序,节约了网络带宽,提高信息搜索的效率。 一个大型搜索引擎需要达到以下几个要求:1)它必须要有一个好的爬行策略,即决定下一步要爬行那些网页的策略,对于定题搜索引擎,这一点尤其重要。2)它必须要有一个高度优化的系统结构,且健壮性、可控制性良好。对于定题搜索引擎,它还必须对下载的网页进行与搜索主题的相关度分析,

文档评论(0)

1亿VIP精品文档

相关文档