Python网络爬虫基础教程 教案 第2章 网页请求原理.docxVIP

样的教育，不一样的品质黑马程序员 样的教育，不一样的品质 itheima 传智教育旗下 高端IT教育品牌 黑马程序员 《Python网络爬虫基础教程》 教学设计 课程名称: 授课年级: 授课学期: 教师发名: (3)使用Fiddler捕获请求有道翻译时，发送的网络请求。 教学后记 黑马程序员 itheima 黑马程序员 itheima 传智教育旗下 高端IT教育品牌 样的教育，不一样的品质 课题名称 第2章网页请求原理 计戈U 课时 4课时 教学引入 网络爬虫请求网页的过程可以理解为用户使用浏览器加载网页的过程，在 这一过程中浏览器向网站服务器发送请求，网站服务器响应请求后将网页源代 码传送回来。因此，了解浏览器与服务器之间的通信方式和交互过程，理解网 页开发技术、结构、分类、数据格式，能进一步加深对网络爬虫的理解。本章 将针对网页请求原理的相关知识进行讲解。 教学目标 使学生了解浏览器加载网页的过程，能够复述出浏览器加载网页的过程 使学生熟悉 的基本原理，能够归纳URL格式、 请求格式和 响应格式 使学生熟悉网页基础，能够区分HTML、JavaScript和CSS三者的区别 使学生掌握 抓包工具Fiddler的使用，能够独立安装并使用Fiddler 工具 教学重点 请求格式 响应格式 网页开发技术 网页的结构 网页数据的格式 Fiddler的下载与安装 Fiddler的基本使用 教学难点 ?网页开发技术 ? Fiddler的基本使用 教学方式 课堂教学以PPT讲授为主，并结合多媒体进行教学 教 学 过 程 第一课时(浏览器加载网页的过程、URL简介、 和 S、 请 求格式、 响应格式) 、创设情景，导入新课 在第1章，我们学习了什么是网络爬虫以及网络爬虫的基本实现流程，对 于网络爬虫而言抓取的数据都在网页中，因此我们有必要学习浏览器加载网页 的完成过程以及URL简介、HTPP和 S协议、 请求格式、 响 应格式等。 二、新课讲解 知识点1?浏览器加载网页的过程 教师通过PPT的方式讲解浏览器加载网页的过程。 ①浏览器通过DNS (Domain Name System,域名系统)服务器查找百度服 务器对应的IP地址。 ②浏览器向IP地址对应的Web服务器发送 请求。 ③Web服务器接收 请求后进行处理，向浏览器返回HTML页面。 ④浏览器对HTML页面进行渲染呈现给用户。 知识点2- URL简介 教师通过PPT的方式讲解URL简介。 (1)熟悉URL的概念和语法格式。 (2)熟悉URL格式中各选项的含义。 itheima 传智教育旗下 高端IT教育品牌 样的教育，不一样的品质 黑马程序员 itheima 传智教育旗下 高端IT教育品牌 黑马程序员 itheima 传智教育旗下 高端IT教育品牌 样的教育，不一样的品质 URL (全称Uniform Resource Locator)又称URL地址，表示统一资源定位 符，它用于指定因特网上某个资源的位置。 scheme://[user]:[password]@host:[port]/path;[params]?[query]#[frag ] 上述语法格式中，中括号包裹的选项为可选项，关于URL地址语法格式中 各选项的说明如下： 教师通过PPT的方式讲解URL格式中各选项的含义。 scheme:表示方案，用于标识采用哪种传输协议访问服务器资源user:表示用户，用于标识采用某些方案访问资源时需要使用的用户名 password:表示密码，用户名后面可能要包含的密码，中间以冒号分隔 host:表示主机地址，也就是存放资源的服务器主机名或IP地址 port:表示端口，也就是存放资源的服务器监听的端口号 path:用于指定本次请求资源在服务器中的位置 params:表示访问资源时使用的协议参数，参数之间以;分隔 query:表示查询字符串，用于指定查询的资源，一般使用?与URL的 其余局部进行分隔。查询字符串没有通用格式，它通常会以多个参数，每个 参数的名称与值使用=进行连接。 frag:表示片段，用于指定访问资源时某一局部资源的名称。 知识点3- 和 S教师通过PPT的方式讲解 和 S协议。 (1)熟悉 协议的概念。 (2)熟悉 S协议的概念。 教师通过PPT的方式讲解 协议的概念。 协议全称为超文本传输协议(Hypertext Transfer Protocol),它用于将 Web服务器的超文本资源传送到浏览器中。 协议能够