云采集规则优化加速案例1——不固定元素列表转固定元素列表.pdfVIP

云采集规则优化加速案例 （1）——不固定元素列表转固定元素列表 看过云采集加速原理的用户都知道 ，云采集上除了单个元素和不固定元素列表以 外其他列表都是可以拆分的 ，这样可以加快云采集的速度。大家使用云采集的规 则是不固定元素列表的时候 ，这个规则在云服务器上是无法被拆分的 ，所以不能 进行采集速度的优化 ，导致使用云采集时的速度没有提升。 这个教程将教大家如何通过将不固定元素列表转换为固定元素列表来帮助大家 优化自己的云采集规则 ，从而获得更高的采集速度。 各种循环列表的循环方式 先给大家演示一个不固定元素列表自动生成的例子 ： 以 ：http///tutorial?type=1 这个网站为例 ，打开这个网站点击第一个教程名称添加循环 ，再继续点击第二个 循环项添加循环。 如图 ：这就是系统自动生成的固定循环列表的xpath （//HTML/BODY[1]/DIV[3]/DIV[1]/DIV[1]/DIV[2]/DIV[1]/DIV/A[1] ） 接着我们通过修改不固定元素列表的Xpath进行固定元素列表的转换。 首先 ，把这个不固定元素列表的Xpath复制到火狐浏览器里面打开 ， 可以看到网页中每一行教程的信息都被提取到了 ， 而我们要进行列表的拆分 ，只需要在上面的Xpath进行修改;如下 //HTML/BODY[1]/DIV[3]/DIV[1]/DIV[1]/DIV[2]/DIV[1]/DIV[1]/A[1] 可以看到在给 DIV 后面加上[1],就可以定位到了第一个教程的位置,观察第一个 Xpath可以看到只有倒数第二个 DIV 没有序号 ，意味着选中了全部的教程 ，所 以当要进行列表拆分的时候就需要通过加上[数字] ，来进行定位。以后我们碰到 其他需要拆分的列表时 ，建议复制 xpath到火狐浏览器中 ，通过修改其中未定 位的标签 ，来进行拆分的实验 ，确定修改好的Xpath。 Xpath的修改可以参考这两个教程 ：Xpath1、Xpath2 其它行的位置 ，根据列表的顺序 ，修改上面的Xpath 中的数字 ，再将修改好的 Xpath复制到固定元素列表里就可以了 如下图 ，我修改了 8个 Xpath,所以列表中只出现了 8个元素的信息。 到这里我们就完成了不固定元素列表的转换 固定元素列表和不固定元素列表是可以互相修改的 ，前提是源码内容格式要一 致 ，建议大家能改成固定元素列表的尽量改成固定元素列表（循环列表里没有点 击元素 ，直接是提取元素的不要用这种方法拆分 ，可以试试下面推荐的另一个加 速案例 ）。这样才会拆分任务加快云采集速度。 其他云加速的案例 ： 云采集规则优化加速案例 （2 ）——循环翻页拆分