《数据采集技术》课件——网页请求原理.pptxVIP

网页请求原理

Contents知识目标掌握网页请求原理技能目标能够复述出浏览器加载网页的过程素养目标培养良好的信息素养和道德意识

思考WWW.这段网络访问过程中发生了什么在浏览器的地址栏输入网址，按下回车后会显示该网址对应的网页。回车

浏览网页过程浏览网页过程的示意图如下所示客户机web服务器通过IP地址请求页面返回页面返回IP地址域名DNS服务器对HTML页面进行渲染域名传输协议信息及主机类型信息+网址

统一资源定位符URLURL是互联网上标准资源的地址，包含了文件的位置以及浏览器处理方式等信息。

/nmrjydsjxy/index.htm统一资源定位符URL协议头除了https外，常见的协议头还有http、ftp、file等。URL地址由协议头、服务器地址、文件路径三部分组成。服务器地址文件路径

统一资源定位符URLHTTP是一套计算机通过网络进行通信的规则，它由两部分组成：客户端（Client）请求消息和服务端（Server）响应消息。请求响应存储着一些资源ClientServer

统一资源定位符URL2.发送请求4.响应1.输入URL分析浏览器显示完整网页的过程用户浏览器web服务器3.封装成HTTP响应报文5.解析HTML文件并加载其中的JavaScript文件

分析浏览器显示完整网页的过程所有的文件都下载成功后，浏览器会根据HTML语法结构，将网页完整的显示出来。

客户端HTTP请求格式请求方法空格URL空格协议版本回车符换行符请求行头部字段名：值回车符换行符头部字段名值回车符换行符：回车符换行符请求头部请求数据请求行请求头部空行请求数据客户端发送一个HTTP请求到服务器的请求消息，组成部分：

客户端HTTP请求消息示例GET/HTTP/1.1Host:Connection:keep-aliveUpgrade-Insecure-Requests:1User-Agent:Mozilla/5.0(WindowsNT10.0;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/54.0.2840.99Safari/537.36Accept:text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8Referer:/Accept-Encoding:gzip,deflate,sdch,brAccept-Language:zh-CN,zh;q=0.8,en;q=0.6Cookie:BAIDUID=04E4001F34EA74AD4601512DD3C41A7B:FG=1;BIDUPSID=04E4001F34EA74AD4601512DD3C41A7B;PSTM=1470329258;MCITY=-343%3A340%3A;H_PS_PSSID=1447_18240_21105_21386_21454_21409_21554;BD_UPNsug=3;sugstore=0;ORIGIN=0;bdime=0;H_PS_645EC=7e2ad3QHl181NSPbFbd7PRUCE1LlufzxrcFmwYin0E6b%2BW8bbTMKHZbDP0g;BDSVRTM=0请求行

客户端HTTP请求HTTP版本描述HTTP0.9只有基本的文本GET功能。HTTP1.0定义了三种请求方法：GET，POST和HEAD方法。HTTP1.1在1.0基础上进行更新，新增了五种请求方法：OPTIONS，PUT，DELETE，TRACE和CONNECT方法。HTTP2.0所有首部键必须全部小写，而且请求行要独立为：:method、:scheme、:host、:path这些键值对。不同的HTTP版本下使用的请求方法不同

用于从Web服务器请求数据客户端HTTP请求最常用的请求方法是GET和POST，两者的区别：1.GET方法(1)发送一个请求浏览器web服务器(2)返回响应数据在使用GET方法时：

客户端HTTP请求最常用的请求方法是GET和POST，两者的区别：用于向Web服务器提交数据2.POST方法(1)数据打包发送浏览器web服务器(3)返回响应在使用POST方法时：(2)根据数据执行相应的操作

客户端HTTP请求两者的区别：参数都显示在URL上1.GET请求服务器根据该请求所包含URL中的参数来产生响应内容。请求参数都暴露在外，安全性不高。参数在请求体当中2.POST请求消息长度没有限制而且采取隐式发送，通常用来向HTTP服务器提交量比较大的数据。高安全性比GET多使用场合

客户端