大数据采集与分析案例教程项目2开源社区数据的采集与解析equests库+re模块应用.pptxVIP

项目2开源社区数据的采集与解析——requests库+re模块应用

学习目标掌握requests库的基本使用方法，包括发起请求、获取响应信息等。掌握使用requests库发送带有参数、头部信息和Cookie的请求。熟悉正则表达式的基本语法。掌握使用re模块进行正则表达式的查找、匹配和替换操作的方法。了解浏览器开发者工具的功能和使用方法。

技能目标能使用requests库发送HTTP请求，并获取返回的响应信息。能使用requests库设置请求参数、请求头和Cookie。能使用正则表达式解析网页，提取所需的信息。能使用re模块对网页内容进行查找、匹配和替换操作。能使用浏览器开发者工具分析网页请求。

素养目标培养信息检索和分析能力，能够在网络上检索和分析所需的信息。培养解决问题的能力和创新能力，能够利用所学知识解决实际问题。培养自主学习和终身学习的意识，能够不断学习和更新知识。养成良好的编程习惯，能够编写符合编码规范的高质量代码。培养大数据采集和分析技能的实践能力，综合应用requests库和re模块，开发“开源社区数据的采集与解析”项目。

2.1项目需求（1）使用requests库完成对开源中国软件库页面的抓取。①以GET方式访问软件库首页，获取首页的源代码，软件库首页如图2-1所示。图2-1

2.1项目需求（1）使用request