Python爬虫技术与51job数据分析.pptxVIP

@居然Python抓取求职网站

web开发（后端）爬虫开发人工智能数据分析

Python爬虫什么是爬虫？ 就是抓取网页数据的程序爬虫怎么抓取网页数据？网页三大特征： 1网页都有自己唯一的URL 2网页都是HTML来描述页面信息 3网页都使用HTTP/HTTPS协议来传输HTML数据爬虫的设计思路： 1.确定爬取的URL地址 Python爬虫

Python爬虫安装：pipinstallrequestsrequests库的七个主要方法方法 解释requests.request() 构造一个请求，支持以下各种方法requests.get() 获取html的主要方法requests.head() 获取html头部信息的主要方法requests.post() 向html网页提交post请求的方法requests.put() 向html网页提交put请求的方法requests.patch() 向html提交局部修改的请求requests.delete() 向html提交删除请求 requests

Python爬虫XPath是XML路径语言（XMLPathLanguage），支持HTML，是一种用来确定XML文档中某部分位置的语言。XPath基于XML的树状结构，提供在数据结构树中查找节点的能力。Xpath可以通过元素和属性进行导