Hadoop视角下的Nutch爬行性能优化8页.pdfVIP

  • 2
  • 0
  • 约8.46千字
  • 约 8页
  • 2021-08-01 发布于湖北
  • 举报
Hadoop视角下的 Nutch 爬行性能优化 0 引言 Nutch[1] 是基于 Lucene 的开放源码的 Web搜索引擎,基于 Hadoop实 现分布式 Web页面的爬行、索引以及检索工作。 詹恒飞等 [2] 对通过修改 Nutch 在抓取 Web页面时的默认等待时间及 抓取行为等方式,达到优化 Nutch 的目的。 NutchWiki[3] 分析了 Nutch 从

文档评论(0)

1亿VIP精品文档

相关文档