项目介绍项目实现程序流程数据分析与总结01课件.pptxVIP

历史天气信息采集项目·项目介绍·项目实现·程序流程·数据分析与总结

学习目标了解掌握掌握掌握了解selenium12掌握selenium环境的搭建能够正确使用XPATH进行HTML元素定位34能够使用selenium+gogle历史天气信息爬取

01项目介绍PartOne02selenium介绍与环境搭建PartTwo03XPath介绍与应用PartThree04应用selenium进行历史天气信息采集PartFour

01项目介绍

1-1任务由来思考在前面的课程,我们采用自己的方法对/wea_history/59431.htm这个网页的天气信息进行了采集,大部分的同学选择的是一页页复制,然后粘贴到excel中进行数据分析，这种操作方式费时费力，工作效率低,而且容易出错.那么，要如何才能快速高效而又准确地完成数据采集呢?？

1-1任务由来我们可以使用python+selenium的方式来进行自动采集。Selenium使用灵活，简单，写出的测试用例非常简洁，优美，易于维护；Selenium测试直接运行在浏览器中，就像真正的用户在操作一样。结论

1-2项目描述本项目的目标是根据我们选择的城市,自动采集该城市2011年到2022年的天气信息,包括日期,最高温,最低温,天气,风力风向,空气质量指数等信息,并保存到cvs或exel中用于后续的分析,如图1所示图1天气信息采信示意图

02selenium介绍与环境搭建

2-1selenium介绍Seleniumisasuiteoftools?toautomatewebbrowsersacrossmanyplatforms.这是selenium官网关于selenium的一段描述。Selenium是一个强大的开源的Web功能自动化测试工具系列。目前主要包括以下5部分：SeleniumCoreSeleniumIDESeleniumRC（remotecontrol）SeleniumGridSeleniumwebdriverSelenium2=Selenium1+WebDriverSelenium是什么

2-1selenium介绍为什么用seleniumSelenium使用灵活，简单，写出的测试用例非常简洁，优美，易于维护；支持多种语言编写用例最主要的还是它是开源的了，非常强大的Selenium测试直接运行在浏览器中，就像真正的用户在操作一样。测试与浏览器的兼容性，测试你的应用程序看是否能够很好得工作在不同浏览器和操作系统之上。测试系统功能，创建衰退测试检验软件功能和用户需求。

2-2selenium+google环境搭建步骤1,安装google浏览器：图2google浏览器下载页面浏览/,下载安装最新版本google浏览器即可

2-2selenium+google环境搭建步骤2,查看google浏览器版本：图3查看google浏览器版本图4google浏览器版本打开google浏览器,点击右上角的三个点-点击帮助-关于google

2-2selenium+google环境搭建打开/index.html,根据google浏览器版本,选择相应版本的驱动,如果没有完全一样的,选择同版本最相近的一个,然后根据系统的不同,选择对应的驱动,win32位和win64位通用win32位驱动步骤3,下载google驱动：图5gooble浏览器驱动选择图6根据系统选对应驱动

2-2selenium+google环境搭建把下载好的驱动解压到一个没有中文的路径,建议放在D盘或E盘根目录下,或者放到python的安装目录,查看python安装目录可以在cmd中使用wherepython进行查看,以下实验都以放在与python同目录为例步骤4,解压驱动到没有中文的路径：图6查看python路径图7驱动和python.exe放一起

2-2selenium+google环境搭建selenium不属于python自带的模块,所以要使用pip来进行安装.打开pycharm,点击底下的Teminal,然后输入pipinstallselenium-i/simple使用清华源进行下载安装步骤5,使用pip安装selenium：图8pycharm中安装selenium

2-2selenium+google环境搭建selenium+google环境是本项目必须环境,所以要先验证环境已成功搭建,才可以进行后续的操作.1.新建一个.py文件,输入以下程序,执行步骤6,验证selenium+google环境搭建成功：#导入模块fromseleniumimportweb