14 Scrapy框架1相关知识.docxVIP

PAGE

PAGE1

一、教学分析

课题名称

Scrapy框架1

课程

大数据采集与分析

系部

任课教师

教材

《大数据采集与分析案例教程》

课题类型

理论+实践课

课时

2课时

地点

实训机房

班级

内容提要与时间分配：

1、学习目标

了解Scrapy架构

掌握Scrapy安装与工程创建

掌握常用工具命令

掌握scrapy.Spider类

掌握爬虫创建、编写和运行

2、教学内容

知识讲解：

（1）Scrapy架构

（2）Scrapy安装

（3）创建Scrapy工程

（4）Scrapy常用命令的使用

（5）Spider类的定义、编写和运行

项目实施：

（1）学生实践安装Scrapy

（2）学生实践创建Scrapy工程

（3）学生实践使用命令创建自定义Spider类和编写

（4）学生实践使用命令运行Spider

内容总结：总结本节课程中遇到的问题，并对涉及到的知识点进行梳理。

3、本次课程内容特点：

本节课程以实践为主，以Scrapy架构为驱动，引导学生动手安装Scrapy库，使用Scrapy常用命令进行工程创建、爬虫创建和运行。使用PyCharm进行Scrapy工程编程，验证爬虫是否正常运行，进而为后续的课程学习做好铺垫。

4、教学重点与难点

重点：Scrapy的安装，Scrapy工程的创建，Spider类的定义、编写和运行。

难点：Scrapy爬虫框架的架构理解，