- 1、本文档共17页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
使用八爪鱼v7采集知乎发现话题的信息本文介绍使用八爪鱼采集知乎-发现-话题为例采集网站:/#signin使用功能点:八爪鱼7.0教程——AJAX滚动教程/tutorial/ajgd_7.aspx?t=1cookie登陆方法(7.0版本)/tutorial/cookie70.aspx?t=1相关采集教程:新浪微博数据采集豆瓣电影短评采集搜狗微信文章采集步骤1:创建采集任务1)进入主界面,选择“自定义模式”使用八爪鱼v7采集知乎发现话题的信息图1将要采集的网址复制粘贴到网站输入框中,点击“保存网址”使用八爪鱼v7采集知乎发现话题的信息图2步骤2:登录知乎1)系统自动打开网页,进入知乎登录页面。系统默认停留在扫描二维码登录页面。点击“使用密码登录”,选择“更多操作”使用八爪鱼v7采集知乎发现话题的信息图32)选择“点击该元素”,进入“使用密码登录”页面使用八爪鱼v7采集知乎发现话题的信息图43)依次点击账号和密码输入框,输入账号和密码(直接输入,可忽视操作提示框)使用八爪鱼v7采集知乎发现话题的信息图54)点击“登录”按钮,选择“点击该按钮”使用八爪鱼v7采集知乎发现话题的信息图65)在页面右上角,打开“流程”,以展现出“流程设计器”和“定制当前操作”两个板块。系统会自动登录知乎。再次选中“打开网页”步骤,打开“高级选项”,打开“缓存设置”,勾选“打开网页时使用指定Cookie”。八爪鱼会记住这个cookie状态,下次打开这个页面的时候,就会以登陆之后的状态打开使用八爪鱼v7采集知乎发现话题的信息图7注意:由于cookie是有生命周期的,这个周期多长时间取决于采集的网站。如果cookie到期了,就需要再重新获取一次登陆之后的cookie。另外,如果需要切换账号,可以勾选“打开浏览器前清理缓存”,然后再取消cookie,重新设置其他账号即可。步骤3:设置Ajax下拉加载点击“发现”按钮,在操作提示框中,选择“点击该链接”使用八爪鱼v7采集知乎发现话题的信息图8系统自动挡进入“发现”栏目下的话题页面。我们发现,下拉页面,会出现“加载中”的字样,等待约2秒,会有新的数据加载出来。经过约40次下拉加载,页面达到最底部使用八爪鱼v7采集知乎发现话题的信息图9“点击元素”步骤涉及Ajax下拉加载。打开“高级选项”,勾选“页面加载完成后向下滚动”,设置滚动次数为“40次”,每次间隔“2秒”,滚动方式为“直接滚动到底部”,最后点击“确定”使用八爪鱼v7采集知乎发现话题的信息图10注意,这里的滚动次数、间隔时间,需要针对网站进行设置,可根据相关功能点教程进行学习步骤4:创建列表循环1)移动鼠标,选中页面里的第一条话题链接。选中后,系统会自动识别页面里的其他相似链接。在右侧操作提示框中,选择“选中全部”使用八爪鱼v7采集知乎发现话题的信息图11选择“采集以下链接地址”使用八爪鱼v7采集知乎发现话题的信息图12再次选中页面里的第一条话题链接,选择“采集该链接的文本”使用八爪鱼v7采集知乎发现话题的信息图13选择“启动本地采集”使用八爪鱼v7采集知乎发现话题的信息图14步骤5:数据采集及导出1)采集完成后,会跳出提示,选择“导出数据”。选择“合适的导出方式”,将采集好的数据导出使用八爪鱼v7采集知乎发现话题的信息图152)这里我们选择excel作为导出为格式,数据导出后如下图使用八爪鱼v7采集知乎发现话题的信息图16八爪鱼——70万用户选择的网页数据采集器。1、操作简单,任何人都可以用:无需技术背景,会上网就能采集。完全可视化流程,点击鼠标完成操作,2分钟即可快速入门。2、功能强大,任何网站都可以采:对于点击、登陆、翻页、识别验证码、瀑布流、Ajax脚本异步加载数据的网页,均可经过简单设置进行采集。3、云采集,关机也可以。配置好采集任务后可关机,任务可在云端执行。庞大云采集集群24*7不间断运行,不用担心IP被封,网络中断。4、功能免费+增值服务,可按需选择。免费版具备所有功能,能够满足用户的基本采集需求。同时设置了一些增值服务(如私有云),满足高端付费企业用户的需要。
您可能关注的文档
- 斗门区职称论文发表网高职院校体育教学存在问题对策论文选题题目.docx
- 二道江区代理发表职称论文发表工程机械液压传动系统故障维护论文选题题目.docx
- 乌拉特中旗职称论文发表网国土资源经济效益利用方式论文选题题目.docx
- 方山县职称论文发表建筑电气安装施工技术质量控制论文选题题目.docx
- 五常职称改革职称论文发表电力二次系统安全防护策略论文选题题目.docx
- 肥城论文网代理发表职称论文发表土木工程施工项目管理措施论文选题题目.docx
- 2017年度中国载货车行业现状和发展趋势分析.docx
- 五指山论文网职称论文发表网贝氏体离心复合轧辊铸造工艺论文选题题目.docx
- 凤城职称改革职称论文发表蓖麻油药理作用临床应用不良反应论文选题题目.docx
- 扶沟县代理发表职称论文发表公路工程混凝土防治措施论文选题题目.docx
- 地理-内蒙古锡林郭勒盟2023~2024学年第一学期高三年级全盟统考试题和答案.docx
- 历史|湖北元月调考暨湖北省部分市州元月高三期末联考历史试卷及答案.docx
- 历史-内蒙古锡林郭勒盟2023~2024学年第一学期高三年级全盟统考试题和答案.docx
- 数学(理科)-内蒙古锡林郭勒盟2023~2024学年第一学期高三年级全盟统考试题和答案.docx
- 历史丨金太阳24~239C湖北省十堰市2024届高三上学期1月调研考试历史试卷及答案.docx
- 青岛某高层办公楼地下防水施工方案(sbs卷材).docx
- 土木工程实习报告表格.doc
- 工程流体力学教学课件ppt作者闻建龙工程流体力学习题答案部分.doc
- 围手术期管理制度(1)_0.doc
- 2023年公务员多省联考《申论》题(内蒙古旗县卷)及参考答案.doc
文档评论(0)