京东商品信息采集与抓取方法.docxVIP

京东商品信息采集与抓取方法本文介绍使用八爪鱼采集器简易模式采集与抓取京东商品信息的方法。需要采集京东内容的，在网页简易模式界面里点击京东进去之后可以看到所有关于京东的规则信息，我们直接使用就可以的。采集京东商品搜索（下图所示）即打开京东主页输入关键词进行搜索，采集搜索到的内容。1、找到京东商品搜索规则然后点击立即使用下图显示的即为简易模式里面京东商品搜索的规则查看详情：点开可以看到示例网址，示例关键词为手机任务名：自定义任务名，默认为京东商品搜索任务组：给任务划分一个保存任务的组，如果不设置会有一个默认组搜索关键词：设置要采集的关键词，如果有多个关键词一行一个 采集页数：设置采集多少页，如果不设置页数则会一直采集完为止，或者输入可采集的最大页数示例数据：这个规则采集的所有字段信息规则制作示例例如采集京东商品搜索关键词为小米6和安踏运动鞋的数据信息，每个关键词采集前2页数据，在设置里如下图所示：任务名：自定义任务名，也可以不设置按照默认的就行；任务组：自定义任务组，也可以不设置按照默认的就行；搜索关键词:输入小米6和安踏运动鞋，一行一个；采集页数：输入2代表每个关键词采集前两页数据，不输入则代表一直采集完为止；设置好之后点击保存保存之后会出现开始采集的按钮选择开始采集之后系统将会弹出运行任务的界面可以选择启动本地采集（本地执行采集流程）或者启动云采集（由云服务器执行采集流程），这里以