centos 6.5 LVS-DR模式群集搭建与维护

Posted 2020-12-03

群集列表 

LB：192.168.4.4

RIP1:192.168.4.5

RIP2:192.168.4.6

RIP3:192.168.4.7

NFS:192.168.4.8

 

LB集群的管理工作包括

1. 创建虚拟服务器

2. 添加服务器节点

3. 查看集群节点

4. 删除集群节点

5. 保存负载分配策略

 

 

一、配置LB调度器

1.1 配置虚拟ip地址 vip

[[email protected] ~]# vim /opt/vip.sh

#!/bin/bash

VIP=192.168.4.100

/sbin/ifconfig eth0:0 $VIP broadcast $VIP netmask 255.255.255.255 up

/sbin/route add -host $VIP dev eth0:0

[[email protected] ~]# chmod +x /opt/vip.sh

[[email protected] ~]# echo "/opt/vip.sh" >> /etc/rc.local

[[email protected] ~]# sh /opt/vip.sh

 

 

1.2 安装ipvsadm管理工具

 [[email protected] ~]# yum -y install ipvsadm

[[email protected] ~]# ipvsadm -v

ipvsadm v1.26 2008/5/15 (compiled with popt and IPVS v1.2.1)

[[email protected] ~]# lsmod | grep ip_vs

ip_vs                 125220  0

libcrc32c               1246  1 ip_vs

ipv6                  317340  272 ip_vs,ip6t_REJECT,nf_conntrack_ipv6,nf_defrag_ipv6

  

1.3 创建虚拟服务器 和添加节点         

[[email protected] ~]# ipvsadm -A -t 192.168.4.100:80 -s rr

[[email protected] ~]# ipvsadm -a -t 192.168.4.100:80 -r 192.168.4.5:80 -g -w 1

[[email protected] ~]# ipvsadm -a -t 192.168.4.100:80 -r 192.168.4.6:80 -g -w 1

[[email protected] ~]# ipvsadm -a -t 192.168.4.100:80 -r 192.168.4.7:80 -g -w 1

 

-A 表示添加虚拟服务器

-t 用来指定VIP地址及TCP端口

-s 用来指定负载调度算法——轮询（rr）、加权轮询（wrr）、最少连接(lc)、加权最少连接（wlc）。

-a 表示添加服务器

-t 用来指定VIP地址及TCP端口

-r 用来指定RIP地址及TCP端口

-m 表示使用NAT群集模式（-g  DR模式、-I  TUN模式）

-w 用来设置权后重（权重为0时表示暂停节点）。

 

1.4查看集群节点

[[email protected] ~]# ipvsadm -L -n

IP Virtual Server version 1.2.1 (size=4096)

Prot LocalAddress:Port Scheduler Flags

  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn

TCP  192.168.4.100:80 rr

  -> 192.168.4.5:80               Masq    1      0          0         

  -> 192.168.4.6:80               Masq    1      0          0         

  -> 192.168.4.7:80               Masq    1      0          0  

 

1.5删除节点

（此后步骤为测试，不用做）

[[email protected] ~]# ipvsadm -d -r 192.168.4.5:80 -t 192.168.4.100:80

[[email protected] ~]# ipvsadm -L -n

IP Virtual Server version 1.2.1 (size=4096)

Prot LocalAddress:Port Scheduler Flags

  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn

TCP  192.168.4.100:80 rr

  -> 192.168.4.6:80               Masq    1      0          0         

  -> 192.168.4.7:80               Masq    1      0          0  

 

 

 

1.6 保存集群节点

[[email protected] ~]# service ipvsadm save

ipvsadm: Saving IPVS table to /etc/sysconfig/ipvsadm:      [  OK  ]

[[email protected] ~]# cat /etc/sysconfig/ipvsadm

-A -t 192.168.4.100:80 -s rr

-a -t 192.168.4.100:80 -r 192.168.4.5:80 -g -w 1

-a -t 192.168.4.100:80 -r 192.168.4.6:80 -g -w 1

-a -t 192.168.4.100:80 -r 192.168.4.7:80 -g -w 1

 

二、RIP服务器的配置

2.1设定vip脚本和关闭arp应答

提供服务的RIP不需要安装任何IPVS 软件，只需要开机运行脚本

[[email protected] opt]# vim /opt/LB-dr.sh

#!/bin/bash

VIP="192.168.4.100"

/sbin/ifconfig lo:0 $VIP broadcast $VIP netmask 255.255.255.255 up

/sbin/route add -host $VIP dev lo:0

echo "1" > /proc/sys/net/ipv4/conf/lo/arp_ignore

echo "2" > /proc/sys/net/ipv4/conf/lo/arp_announce

echo "1" > /proc/sys/net/ipv4/conf/all/arp_ignore

echo "2" > /proc/sys/net/ipv4/conf/all/arp_announce

 

arp_ignore=1，系统只回答目的IP为是本地IP的包。也就是对广播包不做响应。

arp_announce=2，系统忽略IP包的源地址（source address），而根据目标主机（target host），选择本地地址。

 

[[email protected] opt]# chmod +x LB-dr.sh

[[email protected] opt]# sh LB-dr.sh

[[email protected] opt]# ip a  

 

 

传到其他两个RIP

[[email protected] opt]# scp LB-dr.sh 192.168.4.6:/opt/

[[email protected] opt]# scp LB-dr.sh 192.168.4.7:/opt/

 

2.2  安装web服务

yum安装，略。。。     注意关掉防火墙和selinux

 

三、安装NFS共享存储

3.1 NFS服务器设置

[[email protected] ~]# yum -y install nfs-utils rpcbind

[[email protected] ~]# chkconfig nfs on

[[email protected] ~]# chkconfig  rpcbind on

[[email protected] ~]# mkdir -p /opt/wwwroot

[[email protected] ~]# vim /etc/exports

/opt/wwwroot   192.168.4.0/24(rw,sync,no_root_squash)

 

rw 表示：读写

sync：表示同步写入

no_root_suash:表示当客户机以root身份访问时，赋予本地root权限。

ro：表示只读

 

[[email protected] ~]# service rpcbind start

Starting rpcbind:                                          [  OK  ]

[[email protected] ~]# service nfs start

Starting NFS services:                                     [  OK  ]

Starting NFS quotas:                                       [  OK  ]

Starting NFS mountd:                                       [  OK  ]

Starting NFS daemon:                                       [  OK  ]

Starting RPC idmapd:                                       [  OK  ]

[[email protected] ~]# netstat -antp |grep rpcbind

tcp        0      0 0.0.0.0:111                 0.0.0.0:*                   LISTEN      2030/rpcbind        

tcp        0      0 :::111                      :::*                        LISTEN      2030/rpcbind        

查看本机发布的服务

[[email protected] ~]# showmount -e localhost

Export list for localhost:

/opt/wwwroot 192.168.4.0/24

[[email protected] ~]# echo "www.calabash.com" >/opt/wwwroot/index.html

 

3.2 客户机挂载nfs

[[email protected] ~]# yum -y install nfs-utils rpcbind

[[email protected] ~]# showmount -e 192.168.4.8

Export list for 192.168.4.8:

/opt/wwwroot 192.168.4.0/24

[[email protected] ~]# mount 192.168.4.8:/opt/wwwroot /var/www/html/

 

三个客户机操作都一样

 

验证：

在浏览器输入vip地址192.168.4.100，多刷新几次

[[email protected] ~]# ipvsadm –Lnc