Locator即-统一资源定位符

URL是用来定位和访问互联网上资源的独特标识它包括了资源的位置如IP地址或域名、端口号可选、路径资源在服务器上的位置、查询用于传递参数和片段用于指定资源中的特定部分。

例如

http://www.example.com/index.html

URIUniform

URI是一个更广泛的术语它用来唯一地标识一个资源而不涉及如何定位该资源。

URI可以分为URL和URN两种。

URL是URI的一种形式它提供了定位资源的方法而URN则是用特定命名空间的名字来标识资源不包含位置信息。

URNUniform

URN是URI的一种形式它通过一个全局唯一的名称来标识资源这个名称在某个命名空间中是唯一的。

URN的目的是提供一种方式使得即便资源的位置发生变化依然可以对资源进行标识。

例如urn:isbn:0-395-36341-1

是莎士比亚戏剧《罗密欧与朱丽叶》的ISBN号这是一个典型的URN示例。

URL提供了资源的位置和访问方式是URI的子集易于人类理解和机器解析。

URI更通用的资源标识符可以是URL或URN用于标识资源但不提供定位信息。

URN侧重于通过名称来标识资源与资源的位置无关常用于命名空间中标识唯一资源。

关系图:URI

安全性HTTP协议传输的数据是未加密的可以被第三方拦截和阅读连接状态HTTP连接在数据传输过程中是明文的一旦连接被截断数据就有可能被窃取或篡改端口号80端口性能比HTTPS好证书HTTP不需要使用证书

Transfer

安全性HTTPS通过SSL/TLS协议对数据进行加密确保数据在传输过程中的机密性和完整性防止数据被截获或篡改连接状态HTTPS连接在数据传输过程中始终保持加密状态即便连接在传输过程中被截断也不会影响数据的加密状态端口号443端口性能HTTPS需要进行加密和解密操作可能会增加服务器和客户端的计算量导致性能开销证书HTTPS需要使用SSL/TLS证书来验证服务器的身份确保用户连接的是合法的服务器防止中间人攻击

打开电脑浏览器访问百度

http://www.baidu.com/这时候鼠标右键并选择

“检查”

200代表响应是正常的。

通过状态码我们可以判断发送了请求之后是否得到了正常的响应。

Protocol请求的协议类型这里

http/1.1

代码。

Initiator请求源。

用来标记请求是由哪个对象或进程发起的。

Size从服务器下载的文件和请求的资源大小。

如果是从缓存中取得的资源则该列会显示

from

cache。

Time发起请求到获取响应所用的总时间。

Waterfall网络请求的可视化瀑布流。

如图所示

请求方法(GET,HEAD,POST,PUT,DELETE,CONNECT,OPTIONS,TRACE)Status

Code:

Address:HTTP请求的远程地址即HTTP请求的源地址Referrer

Policy:Referer提供访问来源的信息告诉服务器用户在访问当前资源之前的位置发生传场景包含加载图片、样式文件、JS文件、请求。

浏览器会将当前网址作为Referer字段放在

HTTP

用十进制数字表示的八位字节的数目消息实体的长度用于消息的分包和粘包处理Content-Type:

互联网媒体类型

Accept:请求报头域用于指定客户端可接受哪些类型的信息Accept-Encoding:指定客户端可接受的内容编码Accept-Language:指定客户端可接受的语言类型Connection:是否开启长链接。

close为不长连接keep-alive保持长连接Cookie:维持当前访问会话Host:用于指定请求资源的主机

和端口号其内容为请求

版本开始请求必须包含此内容Referer:是HTTP请求header的报文头用于指明当前流量的来源参考页面。

通过这个信息我们可以知道访客是怎么来到当前页面的Sec-Ch-Ua:可以理解用来替代user-agent的用sec-ch-ua可以防止泄露浏览器详细信息Sec-Ch-Ua-Mobile:是否是移动端用户Sec-Ch-Ua-Platform:表示操作系统名称Sec-Fetch-Dest:表示请求的目的地即如何使用获取的数据Sec-Fetch-Mode:该请求头表明了一个请求的模式Sec-Fetch-Site:请求发起者的来源与目标资源来源之间的关系User-Agent:简称

UA它是一个特殊的字符串头可以使服务器识别客户使用的操作系统及版本、浏览器及版本等信息。

在做爬虫时加上此信息可以伪装为浏览器如果不加很可能会被识别为爬虫