《商务数据采集与处理》课件 第8节：排错与实战.pptxVIP

商务数据采集课程第8节：排错与实战

手动排错概览

排错技巧1提取数据增加提取网页页码解决问题：帮助我们快速定位数据采集从哪一页开始出现问题示例网址：/house/s/b91/?ctm=1.sz.xf_search.page.1

排错技巧2提取数据增加提取网页网址解决问题：提取不到字段时，帮助我们快速检查网页情况，是网页本身的问题（网址失效、本身无此字段），还是八爪鱼问题（无法正常打开网页、XPath定位不准等）示例网址：/?key=%B4%F3%CA%FD%BE%DDact=input

Xpath排错实例1需求：采集所有页列表数据问题：翻页出现问题示例网址：/house/s/b91/?ctm=1.sz.xf_search.page.1

Xpath排错实例2需求：向下滚动10次，采集滚动后的所有数据问题：循环列表定位不到所有的图片示例网址：/search/index?tn=baiduimageipn=rct=201326592cl=2lm=-1st=-1fm=indexfr=hs=0xthttps=111110sf=1fmq=pv=ic=0nc=1z=se=1showtab=0fb=0width=height=face=0istype=2ie=utf-8word=%E5%A4%8F%E7%9B%AE%E5%8F%8B%E4%BA%BA%E5%B8%9

Xpath排错实例3