一种基于中间人的互联网数据采集方法及系统.pdfVIP

  • 4
  • 0
  • 约1.03万字
  • 约 9页
  • 2023-10-21 发布于四川
  • 举报

一种基于中间人的互联网数据采集方法及系统.pdf

本发明提出一种基于中间人的互联网数据采集方法及系统,包括:通过安装中间人代理证书至网页信息采集设备,建立网页信息采集设备的中间人,网页信息采集设备访问互联网中网页信息时,中间人代理网页信息采集设备的全部网络流量;中间人获取包含待采集网页URL正则表达式的采集任务,捕获全部网络流量中符合URL正则表达式的流量,作为中间流量,并将采集任务注入中间流量的HTML页面中,得到待解析页面并将其存入第一数据库;解析模块根据第一数据库中待解析页面的URL信息,将待解析页面分发给解析器实例进行解析,从中获取包含

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 110781367 A (43)申请公布日 2020.02.11 (21)申请号 20191

文档评论(0)

1亿VIP精品文档

相关文档