LVS负载均衡群集——DR模式

Posted 2023-04-01 shanjun12

目录

1.数据包流向分析

2.DR 模式的特点

3.VS-DR中的ARP问题

      4.构建LVS-DR集群的步骤

1.调度服务器192.168.118.103

2.NFS服务器192.168.118.100

3.web1服务器192.168.118.101

4.web2服务器192.168.118.102

5.win10 客户机192.168.118.200

---

1.数据包流向分析

      1.客户端发送请求到Director Server(负载均衡器），请求的数据报文（源IP是CIP,目标IP 是VIP)到达内核空间。

      2.Director server 和 Real Server在同一个网络中，数据通过二层数据链路层来传输。

      3.内核空间判断数据包的目标IP是本机VIP，此时IPVS（IP虚拟服务器）比对数据包请求的服务是否是集群服务，是集群服务就重新封装数据包。修改源MAc地址为 Director Server的MAC地址，修改目标MAC地址为Real Server 的MAC地址，源IP 地址与目标IP地址没有改变，然后将数据包发送给Real server。

     4.到达Real Server的请求报文的NAc 地址是自身的wAc 地址，就接收此报文。数据包重新封装报文(源ⅠP地址为VIP，目标 IP 为CIP)，将响应报文通过lo 接口传送给物理网卡然后向外发出。
     5. Real server直接将l响应报文传送到客户端。

2.DR 模式的特点

     1. Director server 和 Real Server必须在同一个物理网络中。

     2.Real Server 可以使用私有地址，也可以使用公网地址。如果使用公网地址，可以通过互联网对RIP进行直接访问。

     3. Director Server作为群集的访问入口，但不作为网关使用。

     4.所有的请求报文经由 Director Server，但回复响应报文不能经过 Director Server.

     5. Real Server的网关不允许指向 Director Server IP，即Real Server发送的数据包不允许经过Director Server.

     6. Real server 上的lo接口配置VIP的IP地址。

3.LVS-DR中的ARP问题

  1.问题一
      在LVS-DR负载均衡集群中，负载均衡器与节点服务器都要配置相同的VIP地址，在局域网中具有相同的IP地址。势必会造成各服务器ARP通信的紊乱,当ARP广播发送到LVS-DR集群时，因为负载均衡器和节点服务器都是连接到相同的网络上，它们都会接收到ARP广播,只有前端的负载均衡器进行响应，其他节点服务器不应该响应ARP广播

解决方法：对节点服务器进行处理，使其不响应针对VIP的ARP请求;

使用虚接口lo:0承载VIP地址
设置内核参数arp_ ignore=1: 系统只响应目的IP为本地IP的ARP请求.

2.问题二
      问题说明：RealServer返回报文（源IP是VIP）经路由器转发，重新封装报文时，需要先获取路由器的MAC地址，发送ARP请求时，Linux默认使用IP包的源IP地址（即VIP）作为ARP请求包中的源IP地址，而不使用发送接口的IP地址，路由器收到ARP请求后，将更新ARP表项，原有的VIP对应Director的MAC地址会被更新为VIP对应RealServer的MAC地址。路由器根据ARP表项，会将新来的请求报文转发给RealServer，导致Director的VIP失效

解决方法：

       对节点服务器进行处理，设置内核参数arp_announce=2：系统不使用IP包的源地址来设置ARP请求的源地址，而选择发送接口的IP地址。

4.构建LVS-DR集群的步骤

环境配置：

调度服务器192.168.118.103

NFS服务器192.168.118.100

web1服务器192.168.118.101

web2服务器192.168.118.102

客户端（win10）192.168.118.200

VIP192.168.118.188

1.调度服务器192.168.118.103

   1.关闭防火墙与selinux，下载ipvsadm

[root@localhost ~]# systemctl stop firewalld.service 
[root@localhost ~]# setenforce 0
[root@localhost ~]# yum install ipvsadm -y

2.配置虚拟IP地址

[root@localhost network-scripts]# ls
ifcfg-ens33  ifdown-ippp    ifdown-sit       ifup-bnep  ifup-plip    ifup-Team          network-functions-ipv6
ifcfg-lo     ifdown-ipv6    ifdown-Team      ifup-eth   ifup-plusb   ifup-TeamPort
ifdown       ifdown-isdn    ifdown-TeamPort  ifup-ib    ifup-post    ifup-tunnel
ifdown-bnep  ifdown-post    ifdown-tunnel    ifup-ippp  ifup-ppp     ifup-wireless
ifdown-eth   ifdown-ppp     ifup             ifup-ipv6  ifup-routes  init.ipv6-global
ifdown-ib    ifdown-routes  ifup-aliases     ifup-isdn  ifup-sit     network-functions
[root@localhost network-scripts]# cp ifcfg-ens33 ifcfg-ens33:0
[root@localhost network-scripts]# vim ifcfg-ens33:0
 
DEVICE=ens33:0
ONBOOT=yes
IPADDR=192.168.118.188
NETMASK=255.255.255.0

3.重启网卡

[root@localhost network-scripts]# ifdown ifcfg-ens33:0
[root@localhost network-scripts]# ifup ifcfg-ens33:0

4.调整proc响应参数

 

5.刷新配置

6. 加载模块

7. 配置负载分配策略，启动服务

[root@localhost network-scripts]# ipvsadm-save >/etc/sysconfig/ipvsadm
[root@localhost network-scripts]# systemctl start ipvsadm.service

8.清空ipvsadm，添加策略

[root@localhost network-scripts]# ipvsadm -C
[root@localhost network-scripts]# ipvsadm -A -t 192.168.118.188:80 -s rr
[root@localhost network-scripts]# ipvsadm -a -t 192.168.118.188:80 -r 192.168.118.101:80 -g
[root@localhost network-scripts]# ipvsadm -a -t 192.168.118.188:80 -r 192.168.118.102:80 -g

9.保存设置

 

 

 

2.NFS服务器192.168.118.100

 

[root@localhost ~]# cd /opt/
[root@localhost opt]# ls
rh
[root@localhost opt]# mkdir nfs
[root@localhost opt]# cd nfs/
[root@localhost nfs]# mkdir my zyl
[root@localhost nfs]# ls
my  zyl
[root@localhost nfs]# echo "this is my" >my/index.html
[root@localhost nfs]# echo "this is zyl" >qyd/index.html
[root@localhost nfs]#

1.设置权限

[root@localhost nfs]# chmod 777 *
[root@localhost nfs]# ll
总用量 0
drwxrwxrwx. 2 root root 24 5月  13 16:30 my
drwxrwxrwx. 2 root root 24 5月  13 16:30 zyl

2.设置共享策略

3.开启服务发布共享

 

3.web1服务器192.168.118.101

 1.安装apache服务

 

2.挂载 

3.重启服务并输入IP地址查看 

[root@localhost html]# systemctl restart httpd.service

 

4.配置网卡

 5.重启网卡

6.设置路由 

7.开机执行命令 

8.调整proc响应参数

 

4.web2服务器192.168.118.102

1.查看nfs共享目录并下载apache 

2. 挂载

 3.重启服务并输入ip地址查看

 

 

4.配置网关

[root@localhost html]# cd /etc/sysconfig/network-scripts/
[root@localhost network-scripts]# ls
ifcfg-ens33  ifdown-ipv6    ifdown-TeamPort  ifup-ippp   ifup-routes       network-functions
ifcfg-lo     ifdown-isdn    ifdown-tunnel    ifup-ipv6   ifup-sit          network-functions-ipv6
ifdown       ifdown-post    ifup             ifup-isdn   ifup-Team
ifdown-bnep  ifdown-ppp     ifup-aliases  

5.重启服务并查看

 6.设置路由

7.开机执行命令 

8. 赋权

9.调整proc响应参数 

10.重新加载 

 

 

5.win10 客户机192.168.118.200

1.ping两个节点服务器

 2.浏览器输入VIP192.168.118.188测试（刷新时，间隔几十秒）