网页资源获取方法、装置、电子设备和存储介质.pdfVIP

  • 1
  • 0
  • 约1.63万字
  • 约 15页
  • 2023-08-23 发布于四川
  • 举报

网页资源获取方法、装置、电子设备和存储介质.pdf

本公开提供了一种网页资源获取方法、装置、电子设备以及存储介质,涉及大数据技术领域,尤其涉及智能搜索领域。具体实现方案为:在预设站点集合中,确定目标站点集合;在第一时间段内,采用第二地址段,获取所述目标站点集合中的网页资源;基于该第一时间段内获取网页资源的成功率,在该第一地址段和该第二地址段中确定目标地址段;采用该目标地址段,获取该预设站点集合中的各个网页资源。根据本公开,能够在多个地址段内进行择优适配,对网页资源进行多出口获取调度,可以尽可能地抓取预设站点集合中的全量资源,提升网页资源获取的覆盖

(19)国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 116628306 A (43)申请公布日 2023.08.22 (21)申请号 202310124802.2 (22)申请日 2023.02.03 (71)申请人 百度在线网络技术(北京)有限公司

文档评论(0)

1亿VIP精品文档

相关文档