Scrapy框架课程精华:从基础到高级功能详解.pdfVIP

  • 2
  • 0
  • 约小于1千字
  • 约 1页
  • 2026-06-09 发布于北京
  • 举报

Scrapy框架课程精华:从基础到高级功能详解.pdf

Scrapy框架课程介绍:

1.框架的简介和基础使用

2.持久化

3.和

4.日志等级和请求传参

5.CrawlSpider

6.基于redis的分布式爬虫

日志等级(种类):

ERROR:错误

WARNING:警告

INFO:一般信息

DEBUG:调试信息(默认)

指定输入某一志信息:

settings:LOG_LEVEL=‘ERROR’

将日志信息到制定文件中,而并非显示在终端里:

settings:LOG_FILE=‘log.txt’

请求传参:爬取的数据值不在同一个页面中。

需求:将id97中详情数据进行爬取(名称,类型,导演,语

言,片长)

您可能关注的文档

文档评论(0)

1亿VIP精品文档

相关文档