Python3程序设计实例教程 第9章 爬虫入门.pptxVIP

;数据是21世纪极为宝贵的资源;什么是网络爬虫？;爬虫带来的各类问题;Robots协议;京东网站的Robots协议;国家法律条文;法律意识;;网络爬虫的基本处理流程;Python与网页处理;requests 简介;任务：获取“古诗文网”的首页;任务：获取“古诗文网”的首页;【任务】下载LOGO图片到本地 ;Response 对象的属性;如何获得LOGO图片的网址？;;网络爬虫的基本处理流程;网络爬虫的基本处理流程;BeautifulSoup4;提取信息;任务：提取出第1个段落的文本 ;任务：从超链接中提取属性;获取节点;获取节点的主要方式;从超文本中提取出夏天;方法1：找出所有季节（标签a）;方法2：精准定位（find）;方法2：定位（find_all）;方法3：CSS选择器; 获取中国500强名单;三行代码爬取中国500强;难点在哪里？;爬取天气预报：Requests-Pandas;;三强联手：Requests+BS4+Pandas