web缓存服务器varnish-4.1.6的部署及配置详解

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了web缓存服务器varnish-4.1.6的部署及配置详解相关的知识,希望对你有一定的参考价值。

web缓存服务器varnish-4.1.6的部署及配置详解


1.安装varnish4.1.6
安装依赖

yum install -y autoconf automake jemalloc-devel libedit-devel libtool ncurses-devel pcre-devel pkgconfig python-docutils python-sphinx

安装varnish yum仓库

# rpm --nosignature -i https://repo.varnish-cache.org/redhat/varnish-4.1.el7.rpm 
# yum install varnish -y

 

2.设置Varnish参数

# grep "^[a-Z]" /etc/varnish/varnish.params 
RELOAD_VCL=1    # 重新启动服务时是否重新读取VCL并重新编译
VARNISH_VCL_CONF=/etc/varnish/default.vcl    # 默认读取的VCL文件
VARNISH_LISTEN_PORT=80    # 设置监听的端口(默认监听6081端口)
VARNISH_ADMIN_LISTEN_ADDRESS=127.0.0.1    # 管理接口监听的地址
VARNISH_ADMIN_LISTEN_PORT=6082    # 管理接口监听的端口
VARNISH_SECRET_FILE=/etc/varnish/secret    # 使用的密钥文件
VARNISH_STORAGE="malloc,256M"    # 存储文件的大小
VARNISH_USER=varnish    # varnish默认用户
VARNISH_GROUP=varnish    # varnish默认组

 

定义VCL backend

# cat /etc/varnish/default.vcl |grep -v "#"

vcl 4.0;

backend web01 {
    .host = "192.168.3.12";
    .port = "80";
}

 

启动varnish
# systemctl start varnish
# systemctl enable varnish

技术分享

3.定义VCL 后端的集合 director
VCL 可以把多个 backends 聚合成一个组,这些组被叫做 director,这样可以增强性能和弹力,当组里一个 backend 挂掉后,可以选择另一个健康的 backend。VCL 有多种 director,不同的 director 采用不同的算法选择 backend,主要有以下几种:
a. The random director
Random director 会根据所设置的权值(weight)来选择 backend,.retries 参数表示尝试找到一个 backend 的最大次数,.weight 参数表示权值
b. The round-robin director
Round-robin director 在选择 backend 时,会采用循环的方式依次选择。
c. The client director
Client director 根据 client.identity 来选择 backend,您可以设置 client.identity 的值为 session cookie 来标识 backend。

# vim /etc/varnish/default.vcl
vcl 4.0;                    # 指明varnish版本                        
backend web01 {                    # 定义后端服务器1
    .host = "192.168.3.12";
    .port = "80";
}

backend web02 {                    # 定义后端服务器2
    .host = "192.168.3.13";
    .port = "80";
}

import directors;                # 定义directors
sub vcl_init {                    # 定义vcl_init子例程
        new cluster1 = directors.round_robin();
        cluster1.add_backend(web01);
        cluster1.add_backend(web02);
}

sub vcl_recv {                    # 定义vcl_recv子例程
        set req.backend_hint = cluster1.backend(); #指定后端directors
}

详情:https://www.varnish-cache.org/docs/4.1/reference/vmod_directors.generated.html#object-hash

4.设置响应是否命中

sub vcl_deliver {                   # 定义子例程
        if (obj.hits > 0) {      
                set resp.http.X-Cache = "HIT via" + " " + server.ip;
        } else {
                set resp.http.X-Cache = "MISS via" + " " + server.ip;
        }             # 判断如果命中就在http响应首部设置X-Cache为HIT,否则就在http响应首部设置X-Cache为MISS。
}

 

然后再到页面上访问看一下是否已经生效,可以看到第一次访问的时候是MISS第二次的时候就是HIT了

技术分享


5.指定某些文件不能查缓存

sub vcl_recv {
        if (req.url ~ "^/test.html$") {
                return(pass);
        }            ##定义请求的文件中如果匹配test.html就pass,不查缓存
}

 

通过测试可以看到连续访问http://192.168.3.198/test.html都是MISS

技术分享

6.进行健康检查
Varnish可以检测后端主机的健康状态,在判定后端主机失效时能自动将其从可用后端主机列表中移除,而一旦其重新变得可用还可以自动将其设定为可用。为了避免误判,Varnish在探测后端主机的健康状态发生转变时(比如某次探测时某后端主机突然成为不可用状态),通常需要连续执行几次探测均为新状态才将其标记为转换后的状态。
每个后端服务器当前探测的健康状态探测方法通过.probe进行设定,其结果可由req.backend.healthy变量获取,也可通过varnishlog中的Backend_health查看或varnishadm的debug.health查看。

backend web01 {
    .host = "192.168.10.132";
    .port = "80";
    .probe = {
        .url = "/";            # 指定哪个url需要varnish请求
        .timeout = 2s;         # 指定超时等待时间
        .interval = 5s;         # 指定检查时间间隔
        .window = 5;            # 最多尝试5次
        .threshold = 3;          # 至少有3次成功就宣告backend健康
    }
}

backend web02 {
    .host = "192.168.3.13";
    .port = "80";
    .probe = {
        .url = "/";
        .timeout = 2s;
        .interval = 5s;
        .window = 5;
        .threshold = 3;
    }
}

 

7.设定缓存时长

sub vcl_backend_response {
    if (bereq.url ~ "\\.(jpg|jpeg|gif|png)$") {
        set beresp.ttl = 2h;
    }                 # 如果url是以图片格式结尾的缓存2小时
    if (bereq.url ~ "\\.(html|css|js|jsp)$") {
        set beresp.ttl = 30m;
    }                  # 如果url是以html|css|js|jsp结尾的缓存30分钟
}

 















以上是关于web缓存服务器varnish-4.1.6的部署及配置详解的主要内容,如果未能解决你的问题,请参考以下文章

Squid 服务的安装及部署

Squid代理服务器安装及部署

nginx的web缓存服务环境部署记录

Web - 缓存

分布式缓存组件故障分析及监控优化

Vue项目中Nginx配置及第三方模块添加采坑记