http或https

url传输的时候遵循的协议

协议:就是两个计算机之间为了能够流畅的进行沟通而设置的一个君子协定。常见的协议有TCP/IP SOAP协议,HTTP协议,SMTP协议等算.…

HTTP协议,Hyper Text Transfer Protocol(超文本传输协议)的缩写,是用于从万维网(www:World Wide Web)服务器传输超文本到本地浏览器的传送协议.直白点儿,就是浏览器和服务器之间的数据交互遵守的就是HTTP协议.

HTTP协议把一条消息分为三大块内容。无论是请求还是响应都是三块内容

请求头中最常见的一些重要内容(爬虫需要):

  1. User-Agent:请求载体的身份标识(用啥发送的请求)

  2. Referer:防盗链(这次请求是从哪个页面来的?反爬会用到)

  3. cookie:本地字符串数据信息(用户登录信息,反爬的token)

响应头中一些重要的内容:

  1. cookie:本地字符串数据信息(用户登录信息,反爬的token)

  2. 各种神奇的莫名其妙的字符串(这个需要经验了,一般都是token字样,防止各种攻击和反爬)

请求方式:

​ GET:显式提交,网站搜索内容

​ POST:隐式提交,对服务器数据更改之类