16 Scrapy框架2相关知识.docxVIP

PAGE

PAGE1

一、教学分析

课题名称

Scrapy框架2

课程

大数据采集与分析

系部

任课教师

教材

《大数据采集与分析案例教程》

课题类型

理论+实践课

课时

2课时

地点

实训机房

班级

内容提要与时间分配：

1、学习目标

掌握通用爬虫

掌握CrawlSpider类

了解XMLFeedSpider类

了解CSVFeedSpider类

了解Selector选择器

掌握选择器构建

掌握选择器使用

2、教学内容

知识讲解：

（1）通用爬虫

（2）CrawlSpider

（3）XMLFeedSpider

（4）CSVFeedSpider

（5）Selector选择器

项目实施：

（1）学生实践CrawlSpider子类的创建与应用。

（2）学生实践XMLFeedSpider子类的创建与应用。

（3）学生实践Scrapy的选择器编程，提取网页中的数据。

内容总结：总结本节课程中遇到的问题，并对涉及到的知识点进行梳理。

3、本次课程内容特点：

本节课程以实践为主，讲解Scrapy通用爬虫类和选择器，掌握CrawlSpider类的编程，了解XMLFeedSpider与CSVFeedSpider类的适用场景，掌握选择器的使用提取网页，使用PyCharm进行编程，验证爬虫是否正常运行。

4、教学重点与难点

重点：通用爬虫，XMLFeedSpider，CSVFeedSpi