keepalived高可用lvs集群，主/备和主/主模型

Posted 2020-07-07

利用keepalived高可用lvs集群，主/备和主/主；

vrrp_script高可用双主nginx；

keepalived主备：lvs-dr工作模型

网络搭建：

在前端2台调度器：

DR1:172.18.11.111

DR2:172.18.11.112

VIP：172.18.11.7

后端2台web服务器，运行nginx；

RS1:172.18.11.11

RS2:172.18.11.12

搭建web服务器：

提供简单的测试页面，以便容易观测到哪台RS被调度响应：

在RS1上：

]# yum -y install nginx

]# systemctl start nginx.service

]# cd /usr/share/nginx/html/

]# cp index.html{,.bak}

]# vim index.html

<h1> RS2-172.18.11.11</h1>

在RS2上：

]# yum -y install nginx

]# systemctl start nginx.service

]# cd /usr/share/nginx/html/

]# cp index.html{,.bak}

]# vim index.html

<h1> RS2-172.18.11.12</h1>

在RS1上为方便设置内核参数，编写自动设置脚本：

]# vim skp.sh

]# chmod +x skp.sh

]# ./skp.sh start

查看内核参数，确保生效：

]# cat /proc/sys/net/ipv4/conf/all/arp_ignore

]# cat /proc/sys/net/ipv4/conf/all/arp_announce

此脚本传递给RS2：

]# scp skp.sh [email protected]:/root

在RS2主机运行：

]# ./skp.sh start

查看是否arp设置成功

]# cat /proc/sys/net/ipv4/conf/all/arp_ignore

]# cat /proc/sys/net/ipv4/conf/all/arp_announce

在两个调度器上安装keepalived程序并编辑配置文件

]# yum -y install keepalived

分别编辑两个调度器keepalived配置文件

DR1配置：

DR2配置：

只需修改state为备用和优先级即可，其它都保存不变：

在两台调度器上安装ipvsadm命令工具；

安装ipvsadm并查看lvs集群：

]# yum -y install ipvsadm

]# ipvsadm -Ln

显示内容：

可在DR1查看接口上的VIP，已经获得：

找一台主机多次执行测试：

]# curl http://172.18.11.7

会发现，访问请求是由两台RS交替响应的服务；即：

使DR1掉线即手动停止keepalived服务，观察DR2获得VIP负责集群调度；也可同时手动关闭一台RS上的web服务；仍能正常请求web服务；

这就是keepalived基于主备工作模式健康状态检测，来提供高可用nginx的lvs集群服务；

再做keepalived的主/模式主，来提供高可用nginx的lvs集群服务；

只不过就是两个vrrp实例，一个是A的主B的备，一个是B的主A的备；

DR1：172.18.11.111

DR2：172.18.11.112

VIP1：172.18.11.7

VIP2：172.18.11.77

RS1：172.18.11.11

RS2：172.18.11.12

在DR1上配置keepalived：

注意：centos7中可能没有killall命令需要安装psmisc程序包，才能使用；

]# yum -y install psmisc

在DR2上配置keepalived：

编辑脚本通知机制：

配置RS：

在RS1上为方便设置内核参数，编写自动设置脚本：

注意：此处有一大坑！要在两台RS上分别添加lo:1的本机路由条目：

以便实现172.18.11.77能够被访问调度：

]# ifconfig lo:1 172.18.11.77 netmask 255.255.255.255 broadcast 172.18.11.77

]# route add -host 172.18.11.77 dev lo:1

]# chmod +x skp.sh

]# ./skp.sh start

查看内核参数，确保生效：

]# cat /proc/sys/net/ipv4/conf/all/arp_ignore

]# cat /proc/sys/net/ipv4/conf/all/arp_announce

此脚本传递给RS2：

]# scp skp.sh [email protected]:/root

在RS2主机运行：

]# ./skp.sh start

查看是否arp设置成功

]# cat /proc/sys/net/ipv4/conf/all/arp_ignore

]# cat /proc/sys/net/ipv4/conf/all/arp_announce

两台DR上的keepalived都启动，两台RS上的web服务都启动，分别查看两台DR的ip地址：

分别获取到不同VIP，即DR1是VIP1的主用，是VIP2的备用，DR2是VIP1的备用，是VIP2的主用；

测试：访问VIP1和VIP2

可继续测试，手动停止DR1上的keepalived，查看DR2上的ip地址：

在另一台主机curl测试两个VIP：在一台调度器掉线时，对于两个VIP提供的服务，使用curl测试两个VIP，没有任何影响；

同时，再手动停止RS2的nginx服务，在另一台主机curl测试两个VIP：

此时，一台调度器掉线，一台RS掉线，仍能能保持两个VIP提供客户端的服务；

实现了keepalived高可用lvs-dr集群调度，双主nginx的应用。