大数据采集与分析案例教程项目7爬取和解析求职招聘网站职位数据.pptxVIP

项目7综合实践——爬取和解析求职招聘网站职位数据

学习目标掌握Selenium库的基本使用方法。熟悉XPath的基本语法，掌握lxml库的使用方法。掌握文件和MySQL数据库的基本操作方法。熟悉Scrapy框架的基本使用方法。了解pandas和Matplotlib库的基本使用方法。理解企业软件开发过程，理解项目的需求分析和设计的基本概念和方法。

技能目标能使用Selenium库爬取网页，提取所需数据。能使用lxml库和XPath解析网页，提取所需数据。能以不同的方式存储数据，包括文件存储和MySQL数据库。能使用Scrapy框架采集、解析、保存数据。能使用pandas库进行基本的数据分析，并使用Matplotlib库进行数据可视化。能够应用迭代开发思路进行实践，具备基本的项目开发经验。

素养目标培养良好的编程习惯和代码规范，能够编写高质量的代码。培养团队合作和沟通协调能力，能够与他人协作完成项目任务。培养自主学习和终身学习的意识，能够不断学习和更新知识。培养大数据采集和分析技能的实践能力，综合应用Selenium库、lxml库、文件与数据库操作、Scrapy框架、pandas库、Matplotlib库等开发“求职招聘网站”项目。

7.1项目需求创建一个爬虫项目,爬取和解析求职招聘网站的职位数据,对职位数据进行分析并以图表的方式展示分析结果。（1）编写爬虫程序，搜索求职招