- 3
- 0
- 约1.23千字
- 约 8页
- 2018-08-20 发布于江苏
- 举报
循环步骤的用法-本循环输入
八爪鱼采集器进阶教程
循环步骤的用法-文本循环输入
本文主要是教大家如何结合循环和文本输入步骤来实现循环输入打开多个关键词进行查询的功能。
首先打开八爪鱼采集器→点击快速开始→新建任务,进入到任务配置页面:
选择任务组,自定义任务名称和备注,配置完毕之后,选择下一步
选中浏览器中的打开网页步骤,在右边的页面URL中输入网页URL并点击保存,系统会在软件下方的浏览器中自动打开对应网页:
上图的浏览器中大家可以看到网页我们需要输入电影名称,然后获取电影的信息。而且对于有多个关键词输入查询的需求情况,我们就需要做一个文本循环的操作。我们往流程设计器中拖入一个循环步骤
在选择循环列表中的高级选项,选择文本列表,输入我们需要查询的电影名称,点击OK,再点击保存。如下图所示,循环列表已经创建成功。
接下来我们做一个循环点击的步骤,点击浏览器中的搜索框,在弹出的对话框中选择输入文本
完成上述操作之后,页面流程如下所示
由于我们需要循环输入文字,所以输入文字的步骤需要手动拖入带上面的循环中,并且需要勾选输入文字高级里面的使用当前循环里的文本来填充输入框
配置完成之后,我们点击浏览器中的查询按钮,在弹出的对话框中选择点击这个元素,
注意这个点击元素也是需要放在循环里面,如下图配置完成之后浏览器中已经显示了电影的信息。
这里的翻页其实涉及到了ajax延时加载,ajax异步更新其实就是一种脚本技术,通过在后台与服务器进行少量数据交换,意味着可以在不重新加载整个网页的情况下,对网页的某部分进行更新。Ajax延时加载最明显的两个特征就是点击网页中某个选项的时候网址是不会有任何变化的,然后网页不是完全加载,只是局部有变化。如果符合这两个特征就是一个ajax网页。或者后面进行采集测试的时候,流程直接停止或者没跑完就提示采集已成功完成,基本都是这个问题导致的。原因就是八爪鱼的内置浏览器打开这个网页进行翻页的时候,由于网址没有变化只是局部内容有更新,所以收不到网页变化的信号,导致采集停止或者采集不到数据。
所以按照下图所示,需要在点击翻页的高级设置里面设置ajax加载,这个点击翻页的时间自己估算一下,大概是两秒完成点击步骤。
下面进行数据字段的提取。点击浏览器中需要提取的字段,在弹出的对话框中选择提取这个元素的文本
上述操作之后,系统会在页面的右上方显示我们将要抓取的字段;
注意提取数据也是要在循环里面
接下来配置页面中其他需要抓取的字段,配置完成之后修改字段名称。
修改完成之后点击下图中的保存按钮,再点开图中的数据字段可以看到,系统将会显示最终的采集列表;
点击上图中的下一步→下一步→启动单机采集,进入到任务采集页面,以确保任务的正确性;
系统将会在本地执行采集流程并显示最终采集的结果;
如果我们需要导出最终采集出来的数据信息,点击下图中的导出按钮,选择需要导出的文件类型,系统将会提示保存路径,选择保存路径,系统会将采集到的数据转化成你需要的文件类型。
您可能关注的文档
- 建立校企服务网搭校企服务平台.doc
- 建立梅花山国家公园试点方法(最终版).doc
- 建立法律援助案件量评估体系的初步构想.doc
- 建立金融稳定协调制维护一方金融平安.doc
- 建立高职院校质量理体系专题讲座.ppt
- 建筑业与IT业项管理制度建设比较.doc
- 建筑制图结构制图容和要求.doc
- 建筑分析范例Kibell Art Museum.ppt
- 建筑围护结构热桥位内表面温度验算数据汇总.doc
- 建筑大学共11人.doc
- 浙江省温州市2024-2025学年七年级上学期语文期末考查卷.docx
- 精品解析:北京市建华实验学校2024-2025学年七年级下学期期中英语试题(原卷版).docx
- 精品解析:北京市通州区2024-2025学年七年级下学期期末考试英语试卷(原卷版).docx
- 精品解析:北京市回民学校2024-2025学年九年级上学期期中语文试题(解析版).docx
- 精品解析:北京市海淀区2025-2026学年九年级上学期期末语文试题(解析版).docx
- 精品解析:北京市东城区汇文中学2025-2026学年八年级上学期期中语文试题(原卷版).docx
- 精品解析:北京市回民学校2024-2025学年九年级上学期期中语文试题(原卷版).docx
- 精品解析:2024-2025学年广东省广州市从化区街口镇中心小学人教版五年级上册期中测试数学试卷(解析版).docx
- 精品解析:北京市通州区2024-2025学年七年级下学期期末考试英语试卷(解析版).docx
- 精品解析:北京市建华实验学校2024-2025学年七年级下学期期中英语试题(解析版).docx
原创力文档

文档评论(0)