- 160
- 0
- 约小于1千字
- 约 8页
- 2018-04-04 发布于广东
- 举报
火车头采集器,教程,学习资料,技术资料,参考文件。
查看此教程建议视图:
因为包含很多图片,其他视图导致图片查看不全。
在我们采集过程中,如果遇到对方网站限制了你的ip访问,就可以通过二级代理服务器的功能,来实现更换ip。
获取代理ip
首先我们需要获取一些代理ip(官方没有代理ip,这个ip请自行解决),然后按照下图格式一行一个写到txt文件里面:
上图可以看到格式是“IP:端口”。IP准备好后面会使用到。
代理ip导入采集器
按照下图
然后把第一步准备好的代理IP,,导入进行:
点击“浏览”,选择准备好的代理ip文本,如上图。这样就把文本里面的代理ip导入到采集器里面了,看下图:
点击右侧“批量验证”,验证结果如下:
只有状态是“通过”的才是有效,状态是“未通过”是不能用的给删掉。
从网页中导入代理ip
比如/proxy/post/1448.html 我们要把这样页面的代理ip给导进采集器里面,步骤如下图:
继续按照下图做:
上图中有个匹配正则表达式,如果你和我一样是门外汉的话,就不要深究这是什么东西了,不要动它就好。然后点击下面的“确定”按钮。
然后会有提示导入多少条的提示,点击确定,就可以看到结果了:
同样需要验证。
4,选项设置
选项设置这里也是必须设置好的:
端口设置:这个数字可以是修改,但是要记住,等会要使用的。
访问地址:上面我们说了要验证代理ip,是怎么验证的呢?
就是通过访问这个“访问地址”来验证的,同样可以修
您可能关注的文档
最近下载
- 高考生物考前必背(共28页).pdf VIP
- 西子奥的斯almcb4 2使用说明书1.pdf VIP
- 人工智能 智能体互联 第2部分:身份码.pdf VIP
- 江西省新余市2024-2025学年七年级下学期期末测试数学试卷(含解析).pdf VIP
- 2025年甘肃省白银市中考数学试卷真题(含标准答案)原卷.pdf
- (完整版)《机械工程测试技术基础》熊诗波课后习题答案.pdf VIP
- 人工智能 智能体互联 第1部分:总体架构.pdf VIP
- 基层医疗卫生机构常见新生儿疾病诊疗专家共识:新生儿呕吐(2025年).pptx VIP
- 人工智能 智能体互联 第3部分:身份管理.pdf VIP
- 西子奥的斯电梯调试资料ALMCB-V3.2.ppt VIP
原创力文档

文档评论(0)