- 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
- 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
/
-------------各类专业好文档,值得你下载,教育,管理,论文,制度,方案手册,应有尽有--------------
---------------------------------------------------------精品 文档---------------------------------------------------------------------
图片抓取工具使用方法
我们日常工作中经常遇到需要大量提取图片的工作,但一张张的图片保存效率太低,有没有便捷的方法或工具能让我们事半功倍呢?
其实掌握这三大要素:明确图片网站类型、学会使用图片批量下载工具、明确能够/不能够实现的功能,图片采集不再是难事。
本文向大家介绍一款网络数据采集工具【八爪鱼数据采集器】,教大家如何使用八爪鱼采集软件抓取图片的方法。
明确图片网站的几大类型
1、非瀑布流网站的图片采集
示例网站:豆瓣网
HYPERLINK /photos/album/1620960735/?start=0 /photos/album/1620960735/?start=0
八爪鱼可以对网页中图片的URL进行采集,然后通过专用的图片批量下载工具将URL转化为图片,下载并保存到本地电脑。
2、瀑布流网站的图片采集:直接采集图片地址
示例网站:百度图片网
HYPERLINK /search/index?tn=baiduimageipn=rct=201326592cl=2lm=-1st=-1sf=1fmq=pv=ic=0nc=1z=se=1showtab=0fb=0width=height=face=0istype=2ie=utf-8fm=indexpos=historyword=%E5%A4%8F%E7%9B%AE%E5%8F%8B%E4%BA%BA%E5%B8%90 /search/index?tn=baiduimageipn=rct=201326592cl=2lm=-1st=-1sf=1fmq=pv=ic=0nc=1z=se=1showtab=0fb=0width=height=face=0istype=2ie=utf-8fm=indexpos=historyword=%E5%A4%8F%E7%9B%AE%E5%8F%8B%E4%BA%BA%E5%B8%90
此类网站,需要按下面的步骤对采集规则进行Ajax滚动设置:
① 点击采集规则打开网页步骤的高级选项;
② 勾选页面加载完成后下滚动;
③ 填写滚动的次数及每次滚动的间隔;
④ 滚动方式设置为:直接滚动到底部;
百度图片采集-设置ajax滚动
完成上面的规则设置后,再对页面中图片的url进行采集。
3、瀑布流网站采集:只可点击图片进入图片详情页,再采集图片地址
示例网站:花瓣网
HYPERLINK /explore/huatong/ /explore/huatong/
此类网站,具有以下两个特征:页面上的图片不是一次加载完成,需要滚动多次才会滚动到底部;图片详情页不能通过点击标题进入,而需要点击图片才能进入。针对这类网站,除了要对采集规则进行Ajax滚动设置外,还需要增加一个点击“a标签”的步骤。
如下图设置Ajax滚动,此步骤与2相同,在此不再赘述。
花瓣网图片采集-设置ajax滚动
由于我们采集时需要点击图片,才能进入到产品详情页,在建立元素循环列表的时候,需要将图片链接设置为列表项。点击页面内的第一张图片,再点击“A标签”,系统会选中图片的链接并发现同类链接。选择“选中全部”,再选择“循环点击每个链接”
花瓣网图片采集-点击“A标签”
学会使用图片批量下载工具
1、八爪鱼图片批量下载工具使用教程
图片批量下载工具: HYPERLINK /s/1c2n60NI /s/1c2n60NI
1)下载八爪鱼图片批量下载工具,双击文件中的MyDownloader.app.exe文件,打开软件
2)打开File菜单,选择从EXCEL导入(目前只支持EXCEL格式文件)
3)进行相关设置,设置完成后,点击OK即可导入文件
选择EXCEL文件:导入你需要下载图片地址的EXCEL文件
EXCEL表名:对应数据表的名称
文件URL列名:表内对应URL的列名称
保存文件夹名:EXCEL中需要单独一个列,列出图片想要保存到文件夹的路径,可以设置不同图片存放至不同文件夹
如果要把文件保存到文件夹,则路径需要以“\”结尾,例如:“D:\同步\”,如果要下载后按照指定的文件名保存,则需要包含具体的文件名,例如“D:\同步\1.jpg”
如果下载的文件路径和文件名完全一样,则原先存在的文件会被删
文档评论(0)