- 7
- 0
- 约5.03千字
- 约 45页
- 2019-11-02 发布于湖北
- 举报
八爪鱼·云采集服务平台
八爪鱼·云采集服务平台
网页文章正文采集方法,以及微信文章采集为例
当我们想要将今日头条上的新闻、搜狗微信上的文章正文内容保存下来的时候,怎么办?一篇篇复制粘贴?选择一款通用的网页数据采集器,将会使工作简单很多。
八爪鱼是一款通用的网页数据采集器,可采集互联网上的公开数据。用户可以设置从哪个网站爬取数据,爬取那些数据,爬取什么范围的数据,什么时候去爬取数据,爬取的数据如何保存等等。
言归正传,本文将以搜狗微信的文章正文采集为例,讲解使用八爪鱼采集网页文章正文的方法。文章正文采集,主要有两大类情况:一、采集文章正文中的文本,不含图片;二、采集文章正文中的文本和图片URL。
示例网站: /
使用功能点:
Xpath /search?query=XPath
判断条件 /tutorialdetail-1/judge.html
分页列表信息采集 /tutorial/fylb-70.aspx?t=1
AJAX滚动教程 /tutorialdetail-1/ajgd_7.html
AJAX点击和翻页/tutorialdetail-1/ajaxdjfy_7.html
采集文章正文中的文本,不含图片
具体步骤:
步骤1:创建采集任务
1)进入主界面,选择“自定义模式”
网页文章正文采集步骤1
2)将要采集的网址URL复制粘贴到网站输入框中,点击“保存
您可能关注的文档
最近下载
- 绍兴漫步走在中国文化脉络上.doc VIP
- 2025年阳江市江城区招聘专职人民调解员笔试真题.docx VIP
- 湿法静电除尘器使用说明书.doc VIP
- 海龟汤题库完整版本.doc VIP
- 半导体物理与器件(第4版)尼曼课后答案.pdf
- 续性肾替代治疗容量评估与管理专家共识PPT课件.pptx VIP
- CSCO小细胞肺癌诊疗指南(2026版).docx
- 辽宁省大连市第24中学2025-2026学年高一上学期期中考试语文试卷.pdf VIP
- 辽宁省大连市第二十四中学2025-2026学年高二上学期期中英语试卷(含答案,无听力原文及音频).docx VIP
- 中国地质大学北京第六届创新杯大学生创业计划竞赛暨首都挑战杯.DOC VIP
原创力文档

文档评论(0)