Python爬虫开发实战教程第2章 常见反爬措施及解决方案.pptxVIP

  • 17
  • 0
  • 约2.95千字
  • 约 30页
  • 2021-02-03 发布于辽宁
  • 举报

Python爬虫开发实战教程第2章 常见反爬措施及解决方案.pptx

;;熟悉网站常见反爬手段 自己动手搭建IP代理池 ;;获取cookie的几种方式 通过人工登录系统,然后抓包获取当前登录的cookie信息,然后将cookie信息放到请求的headers中 通过selenium等自动化操作工具获取cookie信息;模拟登录请求的关键点 获取真实的请求地址 获取请求携带的参数信息;selenium的配置 通过pip install selenium安装最新的selenium 下载对应的chromedriver或geckodriver,并将driver放到环境变量的路径中。 chromedriver下载镜像: /mirrors/chromedriver/ geckodriver下载镜像(firefox): /mirrors/geckodriver/ 3. 在pycharm中导入webdriver即可使用。 from selenium import webdriver ;selenium的配置 通过pip install selenium安装最新的selenium 下载对应的chromedriver或geckodriver,并将driver放到环境变量的路径中。 chromedriver下载镜像: /mirrors/chromedriver/ geckodriver下载镜像(firefox): /mirrors/geckodriver

文档评论(0)

1亿VIP精品文档

相关文档