http协议进阶代理

Posted 2020-10-19 老_张

web代理服务器是网络的中间实体，位于客户端和服务器之间，扮演“中间人”的角色，作用是在各端点之间来回传送报文。

其原理是：客户端向代理服务器发送请求报文，代理服务器正确的处理请求和连接，然后返回响应；同时代理服务器自身要向web服务器发送请求并接收响应。

即：代理即是服务器，又是客户端。如下图所示：

 

一、代理的类型

1、私有代理

定义：单个客户端专用的代理被称为私有代理。

私有代理并不常见，但确实存在，比如一些浏览器的辅助产品，一些ISP服务，会在用户的PC上直接运行一些小型代理，以便扩展浏览器特性，提高性能，或者为免费ISP服务提供主机广告等。

2、公共代理

定义：多个客户端共享的代理被称为公共代理，也称为“集中式代理”。

优点：节省成本，效率更高，方便管理，比如：“高速缓存代理服务器”。

 

二、代理和网关的区别

代理：连接两个或多个使用相同协议的应用程序；

网关：连接两个或多个使用不同协议的端点（可以理解为“协议转换器”）；

相同点：代理和网关之间的区别很模糊，代理经常也会做一些协议转换的工作，比如：支持SSL协议、SOCKS防火墙、FTP访问等。

如下图所示：

 

三、代理的特点

1、资源访问控制

利用过滤器代理进行身份权限验证，或使用代理服务器在大量的web服务器和资源之间实现统一的访问控制策略，创建审核跟踪机制，对所有访问控制功能进行配置，特别体现在大型环境或其他分布式机制的服务中。

2、提高安全性

利用代理服务器在网络中的单一安全节点上限制哪些应用层协议的数据可以流入或者流出，还可以提供用来某些防范和杀毒的挂钩程序，以便对流量进行详细的检查。

3、web缓存

可以利用缓存服务器维护存储常用资源的本地副本，并将其按需提供，以减少连接，缩短连接时延，提高性能。

4、反向代理

代理可以扮演服务器的角色接收发送给web服务器的真实请求，也可以发起与其他服务器的通信，以便按需定位所请求的内容；可以利用反向代理来提高访问web服务器上公共资源时的性能。

或者将其和内容路由功能配合使用，以创建分布式网络。

5、内容路由器

代理服务器可以作为“内容路由器”使用，根据因特网的流量以及内容类型将请求导向特定的web服务器（类似负载均衡），也可以用来实现各种服务级的请求。

6、转码器

代理服务器也可以在将内容发送给客户端之前，修改内容的主体格式，对其进行透明转换，我们称之为转码（比如更改图片格式，文件编码类型等）。

7、匿名

可以利用代理从HTTP报文中删除身份特性（比如IP、cookie），从而提供高度的私密性和安全性。

 

四、代理服务器的部署

1、出口代理

将代理固定在本地网络出口点，以便控制本地网络和大型英特网之间的流量，提供针对企业外部恶意攻击的防火墙保护；或降低带宽费用，提高性能。

2、访问（入口）代理

将代理放在ISP访问点上，用来处理来自客户端的聚合请求，ISP使用缓存代理来存储常用的资源副本，提高用户下载速度，降低带宽耗费等。

3、反向代理

将代理部署在网络便边缘，web服务器之前，作为反向代理处理所有传给web服务器的请求，并只在必要时向web服务器请求资源；反向代理可以提高服务器的安全性和性能。

4、网络交换代理

将具有足够处理能力的代理服务器放在网络上的对等交换点，通过缓存来减轻网络堵塞，并对流量进行监视。

5、层级代理

通过代理的层次结构将代理级联起来，既可以是静态的也可以是动态的，直到将报文发送到原始服务器。

下图是一个三级代理的层级结构示意图：

下图是一个静态动态代理结合的结构示意图：

6、常见的几种动态选择父代理方式

①、负载均衡

子代理可能会根据当前父代理上的工作负载级别来决定如何选择一个父代理，以达到负载均衡。

②、地理位置附近的路由

子代理可能会选择负责原始服务器所在物理区域的父代理。

③、协议/类型路由

子代理可能根据URI将报文转发到不同的父代理和原始服务器上，某些特定类型的URI可能要通过一些特殊的代理服务器转发请求，以便进行特殊的协议处理。

④、基于订购的路由

如果发布者为高性能服务额外付费了，他们的URI就会被转发到大型缓存或者压缩引擎上，以提高性能。

PS：在不同的产品中，动态父路由逻辑的实现方式各有不同，包括使用配置文件、脚本语言和动态可执行插件等。

 

五、代理如何获取流量

1、修改客户端配置

很多web客户端都支持手工和自动的代理配置，如果将客户端配置为使用代理服务器，客户端会将HTTP请求直接发送给代理，而不是原始服务器。

2、修改网络，拦截代理

依赖于监视HTTP流量的交换设备及路由设备，在客户端不知情的情况下，对其进行拦截，并将流量导入一个代理。

3、反向代理

修改DNS的命名空间，假扮原始服务器的名称和IP地址，这样所有的请求都会发送给这些反向代理服务器，而不是原始服务器。

4、重定向

可以将某些web服务器的配置为向客户端发送一条HTTP重定向命令，将客户端请求重定向到一个代理上，收到重定向命令后，客户端会与代理进行通信。

 

 

以上大概就是关于HTTP协议中代理相关的一些内容整理，涉及到具体实现以及其他方面，可以查阅或者学习相关的具体资料。。。