大数据采集与分析案例教程项目6旅游数据的采集文件存储+MySQL数据库应用.pptxVIP

项目6旅游数据的采集———文件存储+MySQL数据库应用

学习目标熟悉多种文件格式的数据结构。掌握多种文件格式数据的读取和写入方法。熟悉MySQL数据库的连接和操作流程。掌握PyMySQL库的基本使用方法。

技能目标能使用Python读取和写入多种文件格式的数据。能使用PyMySQL库连接MySQL数据库，执行基本的SQL语句。能使用PyMySQL库操作MySQL数据库，创建数据库、数据表，以及对表数据的增删查改操作。

素养目标培养自主学习和终身学习的意识,能够不断学习和更新知识。培养良好的编程习惯和代码规范,能够编写高质量的代码。培养大数据采集和分析技能的实践能力,能够综合应用文件存储+MySQL数据库开发“旅游数据的采集”项目。

6.1项目需求（1）从CSV和Excel文件中读取旅游数据,去重后存入TXT文件中。①通过Pandas库读取CSV数据源文件和Excel数据源文件中的旅游数据，如图6-1和图6-2所示。图6-1图6-2

6.1项目需求（1）从CSV和Excel文件中读取旅游数据,去重后存入TXT文件中。②对读取的旅游数据进行去重操作。③把去重后的旅游数据转换成字符串，并存入TXT文件中，如图6-3所示。图6-3

6.1项目需求（2）在MySQL数据库中创建旅游信息表,并完成旅游数据的增删改查操作。①使用PyMySQL库在MySQL数据库中创建