关于Http请求header之Referer讲解

Posted 2023-04-27

参考技术A

刚好把手机银行嵌入办事通的项目写完，该项目http请求较多，期间遇到了不少坑，也学到了不少东西，趁这个机会，简单梳理下！

图为http常见的请求方式，经常使用的，就是POST和GET，二者的区别，这里也不多做介绍。项目大致是这样的，提供接口给手机银行，获取请求参数：
request.getQueryString()方法即可取得参数相关信息，随机访问办事通提供的三个接口，最初定的接口，使用https协议，但办事通无法提供CA证书，后放弃（上一篇有提到过，无法绕过ssl验证）

随后办事通提供了另外接口，采用http协议：

采用Http发个简单Post请求，即可获取相应数据，测试环境很快调试完毕上线，上了生产，发现无论怎么都取不到数据。联系了办事通技术人员，打印了http请求头header，说请求头得有Referer，以前只是知道有这么个东西，但不知道具体有什么用，今天就简单说说。

加了这么一句话，请求OK了。那么，Referer是什么东西？
Referer是HTTP请求Header的一部分，当浏览器向Web服务器发送请求的时候，请求头信息一般需要包含Referer。该Referer会告诉服务器我是从哪个页面链接过来的，服务器基此可以获得一些信息用于处理。

Referer作用是什么？
1）防盗链
比如办事通服务器只允许网站访问自己的静态资源，那服务器每次都需要判断Referer的值是否是zwfw.yn.gov.cn，如果是就继续访问，不是就拦截。

2）防止恶意请求
比如静态请求是 .html结尾的，动态请求是 .shtml，那么所有的*.shtml请求，必须 Referer为我自己的网站才可以访问，这就是Referer的作用。

空Referer是怎么回事？
空Referer是指Referer头部的内容为空，或者，一个HTTP 请求头中根本不包含Referer，那么什么时候HTTP请求会不包含Referer字段呢？
根据Referer的定义，它的作用是指示一个请求是从哪里链接过来，那么当一个请求并不是由链接触发产生的，那么自然也就不需要指定这个请求的链接来源。

比如，直接在浏览器的地址栏中输入一个资源的URL地址，那么这种请求是不会包含Referer字段的，因为这是一个“凭空产生”的HTTP请求，并不是从一个地方链接过去的。

在防盗链设置中，允许空Referer和不允许空Referer有什么区别？
允许Referer为空，意味着你允许比如浏览器直接访问，就是空。

页面添加Referer元素需要使用meta referrer标签：

补充说明： Referer的正确英语拼法是 referrer 。由于早期HTTP规范的拼写错误，为了保持向后兼容就将错就错了。其它网络技术的规范企图修正此问题，使用正确拼法，所以目前拼法不统一，还有它第一个字母是大写。

HTTP request header：host, referer, origin的区别

参考技术A

请求头指明了请求将要发送到的服务器主机名和端口号。

如果没有包含端口号，会自动使用被请求服务的默认端口（比如HTTPS URL使用443端口，HTTP URL使用80端口）。

所有HTTP/1.1 请求报文中必须包含一个 Host 头字段。对于缺少 Host 头或者含有超过一个 Host 头的HTTP/1.1 请求，可能会收到 400 （Bad Request）状态码。

例如：Host: developer.cdn.mozilla.net

指定要访问的服务器主机名和端口号

Referer 请求头包含了当前请求页面的来源页面的地址，即表示当前页面是通过此来源页面里的链接进入的。服务端一般使用 Referer 请求头识别访问来源，可能会以此进行统计分析、日志记录以及缓存优化等。

需要注意的是 referer 实际上是 "referrer" 误拼写。参见 HTTP referer on Wikipedia （HTTP referer 在维基百科上的条目）来获取更详细的信息。

Referer 请求头可能暴露用户的浏览历史，涉及到用户的隐私问题。

在以下两种情况下， Referer 不会被发送：

例如：

请求首部字段 Origin 指示了请求来自于哪个站点。该字段仅指示服务器名称，并不包含任何路径信息。该首部用于 CORS 请求或者 POST 请求(MDN中这样写，但是我试了patch/delete方法也会发送origin)。除了不包含路径信息，该字段与 Referer 首部字段相似。

例如：Origin: https://developer.mozilla.org
组成：协议+域名+端口号
注意：只有跨域请求（可以看到 response 有对应的 header：Access-Control-Allow-Origin），或者同域时发送post请求，才会携带origin请求头。
如果浏览器不能获取请求源，那么 origin 满足上面情况也会携带，不过其值为null。
而referer不论何种情况下，只要浏览器能获取到请求源都会携带。如果浏览器如果不能获取请求源，那么请求头中不会携带referer。

用于 CORS: 当我们的浏览器发出跨站请求时，服务器会校验当前请求是不是来自被允许的站点。服务器就是通过 Origin 字段的值来进行判断。

https://juejin.im/post/6844903954455724045#heading-0
https://developer.mozilla.org/zh-CN/docs/Web/HTTP/Headers/Origin
https://www.ruanyifeng.com/blog/2016/04/cors.html