大数据应用编程基础 课件 项目二 实现数据爬虫.pptx

中高本一体化课程体系·大数据应用技术专业核心课程项目二实现数据爬虫

Contents实现数据爬虫大数据应用编程——从数据采集到可视化的完整项目实践路径01任务一使用HTTP爬取数据02任务二使用Scrapy框架爬取数据03任务三使用beautifulsoup库解析数据

任务一：使用HTTP爬取数据掌握网络爬虫工作原理，学会使用多种技术栈自动化采集Web数据

HTTPCRAWLER以电影影评数据采集为实战场景，学习网络爬虫的请求-响应-解析-存储完整工作流，掌握requests库发送HTTP请求、lxml库解析HTML文档、XPath定位网页元素位置的核心技术。任务描述为电