Linux集群架构集群介绍keepalived介绍用keepalived配置高可用集群

Posted 2020-11-01

               集群介绍

这些实现高可用和负载均衡的都是软件，是为我们在服务器上的服务所作用的。

                keepalived介绍

            用keepalived配置高可用集群

在nginx上实现高可用：

 准备工作:

准备两台机器133和134，133作为master(主)，134作为backup（备用）

 两台机器都执行yum install -y keepalived

 两台机器都安装nginx，其中133上已经编译安装过nginx，134上需要yum安装nginx: yum install -y nginx

！！(133机器的nginx是使用二进制的源码包安装的，而134机器的nginx是用yum 安装的

，因此总会有区别的，例如在启动服务的时候和使用二进制源码包安装的nginx服务在启动时，可以

使用 /etc/init.d nginx start启动服务（前提是该服务的服务启动文件放在这里），也可以用 

systemctl start nginx启动服务。而使用yum安装的nginx只能用：systemctl start nginx启动服务)

  一、配置master

1.修改主上master的keepalived配置文件：

下载后的keepalived配置文件在/etc/keepalived/

(编辑133上keepalived配置文件，内容从https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/master_keepalived.conf获取)

（1）先清除keepalived配置文件内容：

>  /etc/keepalived/keepalived.conf

(2)vim /etc/keepalived/keepalived.conf,添加内容：

global_defs {

   notification_email {

     [email protected]@qq.com

   }

   notification_email_from [email protected]@qq.com

   smtp_server 127.0.0.1

   smtp_connect_timeout 30

   router_id LVS_DEVEL

}

vrrp_script chk_nginx {

    script "/usr/local/sbin/check_ng.sh"

    interval 3

}

vrrp_instance VI_1 {

    state MASTER

    interface ens33

    virtual_router_id 51

    priority 100

    advert_int 1

    authentication {

        auth_type PASS

        auth_pass cansheng123456

    }

    virtual_ipaddress {

       192.168.136.100

    }

    track_script {

        chk_nginx

    }

}

VIP:虚拟ip,这个IP是由keepalived给服务器配置上的，服务器靠这个VIP

对外提供服务，当master机器宕机，VIP被分配上backup上，这样就能保证服务运作。

2.编写监控脚本（检测服务nginx）

(内容从https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/master_check_ng.sh获取)

脚本的路径，在配置文件中指定了：

#!/bin/bash

#时间变量，用于记录日志

d=`date --date today +%Y%m%d_%H:%M:%S`

#计算nginx进程数量

n=`ps -C nginx --no-heading|wc -l`

#如果进程为0，则启动nginx，并且再次检测nginx进程数量，

#如果还为0，说明nginx无法启动，此时需要关闭keepalived

if [ $n -eq "0" ]; then

        /etc/init.d/nginx start

        n2=`ps -C nginx --no-heading|wc -l`

        if [ $n2 -eq "0"  ]; then

                echo "$d nginx down,keepalived will stop" >> /var/log/check_ng.log

                systemctl stop keepalived

        fi

fi

当主master的nginx服务不能启动则要关闭keepalived,不然则会主从出现脑裂

修改脚本的权限：

chmod 755 /usr/local/sbin/check_ng.sh

3.启动keepalived：

systemctl start keepalived 

4.测试一下该脚本：

先关闭 nginx ,判断是否会自动启动。

 /etc/init.d/nginx stop

可以看出，关闭了nginx 。脚本会执行，自动执行开启nginx服务

5.检查VIP是否加载了在网卡ip:

    ip addr  (只能用这个命令查看，ifconfig不能看到。) 

        二、配置从backup

配置前先检查两台机器的防火墙和selinux。要关闭

1.编辑keepalived配置文件

先清空自带内容：> /etc/keepalived/keepalived.conf 

vim /etc/keepalived/keepalived.conf 

(编辑配置文件，内容从https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/backup_keepalived.conf获取)

 内容：

global_defs {

   notification_email {

     [email protected]@qq.com

   }

   notification_email_from [email protected]@qq.com

   smtp_server 127.0.0.1

   smtp_connect_timeout 30

   router_id LVS_DEVEL

}

vrrp_script chk_nginx {

    script "/usr/local/sbin/check_ng.sh"

    interval 3

}

vrrp_instance VI_1 {

    state BACKUP

    interface ens33

    virtual_router_id 51

    priority 90

    advert_int 1

    authentication {

        auth_type PASS

        auth_pass cansheng123

    }

    virtual_ipaddress {

        192.168.136.100

    }

    track_script {

        chk_nginx

    }

}

2.编写监控监本：

vim /usr/local/sbin/check_ng.sh

内容从https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/backup_check_ng.sh获取

内容：

#时间变量，用于记录日志

d=`date --date today +%Y%m%d_%H:%M:%S`

#计算nginx进程数量

n=`ps -C nginx --no-heading|wc -l`

#如果进程为0，则启动nginx，并且再次检测nginx进程数量，

#如果还为0，说明nginx无法启动，此时需要关闭keepalived

if [ $n -eq "0" ]; then

        systemctl start nginx

        n2=`ps -C nginx --no-heading|wc -l`

        if [ $n2 -eq "0"  ]; then

                echo "$d nginx down,keepalived will stop" >> /var/log/check_ng.log

                systemctl stop keepalived

        fi

fi

编写完脚本修改其权限:

chmod 755 /usr/local/sbin/check_ng.sh

3.开启 keepalived服务：

systemctl start keepalived

现在主和从都有nginx

浏览器查看：

主：192.168.136.133

从：192.168.136.134

（因为nginx是使用yum安装的，所以默认页的路径/usr/share/nginx/html/index.html）

        测试：

判断标准：查看VIP 访问的是那个机器的默认页

192.168.136.100

说明这时VIP在master上

            测试高可用

测试1：关闭master上的nginx服务

关闭后nginx服务能自动启动,只要keepalived服务启动则加载监控脚本。

 测试2：在master上增加iptabls规则 ：

 iptables -I OUTPUT -p vrrp -j DROP

此时数据已经发生脑裂

（测试后清空 iptables -F）

 测试3：关闭master上的keepalived服务:

VIP 释放，从backup得到VIP.浏览器上访问VIP则访问到

backup的机器的默认页。

一般搭建高可用都是使用两台机器，如果是多台机器则在配置文件中，只要修改权重不同就行了。

mysql做高可用，要保持数据一致才行。

master和backup的keepalived的配置文件中的网卡名字是同一个，这个没有影响吗？backup主机上要是没有那个网卡，keepalived是怎么处理的。

可自配，例如master上叫eth0，backup上叫eth1，在配置文件中指定即可。