又一代理服务器~~haproxy搭建集群

Posted 2021-08-28 可乐卷儿

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档

文章目录

• 一、Haproxy简介
• • 1、常见的wed集群调度器
  • 2、Haproxy的应用
  • 3、Haproxy的优点
  • 4、Haproxy调度算法原理
  • 5、nginx和LVS、 Haproxy的区别
• 二、搭建Haproxy代理服务器
• • 1、实验环境
  • 2、安装Haproxy
  • 3、Haproxy服务器配置【配置文件解析】
  • 4、2台web服务器安装httpd服务
  • 5、启动Haproxy服务
  • 6、测试win端192.168.35.40/test.html
• 三、Haproxy 日志管理
• 四、Haproxy参数优化
• 五、小结

一、Haproxy简介

1、常见的wed集群调度器

目前常见的Web集群调度器分为软件和硬件

• 软件：
  通常使用开源的LVS、Haproxy、nginx
• 硬件：
  一般使用比较多的是F5，也有很多人使用国内的一些产品，如梭子鱼、绿盟(裸金属)等

2、Haproxy的应用

• Haproxy是一款可提供高可用性、 负载均衡、及基于TCP和HTTP应用的代理的软件
  • 适用于负载大的Web站点
  • 运行在硬件上可支持数以万计的并发连接的连接请求

3、Haproxy的优点

序号	具体内容
①	Haproxy在负载均衡速度和并发处理上是优于Nginx
②	Haproxy支持虚拟主机，可以工作在4、7层
③	能够补充Nginx (ip_ hash) 的一些缺点，比如session的保持、Cookie的引导等工作
④	支持以ur1的方式检测后端的服务器的状态
⑤	Haproxy可以对mysql进行负载均衡，对后端的DB节点进行检测和负载均衡
⑥	支持很多负载均衡算法(丰富)，Round-robin (轮询)、weighl-round- robin(加权轮询)、source hashing (原地址保持)、 RI (请求URL)、 rdp-cookie (根 据cookie)

4、Haproxy调度算法原理

Haproxy支持多种调度算法，最常用的有三种

• RR (Round Robin)：轮询调度
  • 举例：有2个节点a、b
    第一个用户访问会被指派的节点是a
    第二个用户访问会被指派的节点是b
    第三个用户访问会被指派的节点是a
    循环往复
• LC (Least|Connections)：最小连接数算法，根据后端的节点连接数大小动态分配前端请求
  • 举例：有三个节点a、b、c，连接数分别为1、2、3
    第一个用户连接请求时，会被指派到a上，连接数变为2、2、3
    第二个用户请求会继续分配给a，连接数变为3、2、3
    第三个用户连接请求时，会分配给b
    以此类推
• SH (Source Hashing)：基于来源访问调度算法，用于一些有Session会话记录在服务器端的场景，可以基于来源的IP、Cookie等做集群调度
  • 举例：有三个节点a、b、c
    第一个用户第一次访问被指派到了a，第二个用户第一次访问被指派到了b
    第一个用户第二次访问会被继续指派到a,第二个用户第二次访问时依旧会被指派到b
    只要负载均衡调度器不重启，第一个用户访问都会被指派到a,第二个用户访问都会被指派到b，永远轮不到c

5、nginx和LVS、 Haproxy的区别

• nginx
  • 支持正则
  • 只支持基于端C1的健康检查
  • 不支持session的直接保持，但能通过IP_ hash来解决
  • 对网络稳定性要求不高
  • 反向代理能力强
  • nginx社区活跃( 社区:维护、更新服务的组织)、收费社区
• LVS
  • 只能基于四层端口转发
  • 在四层做分发作用，抗负载能力强
  • 应用范围广(几乎可以对所有应用做负载)
• Haproxy .
  • 支持8种负载均衡策略
  • 仅做负载均衡软件使用，在高并发情况下性能优于nginx
  • 支持URL健康检测、支持session保持

二、搭建Haproxy代理服务器

1、实验环境

角色	ip
Haproxy	192.168.35.40
web1	192.168.35.10
web2	192.168.35.20
wind10	192.168.10.100

2、安装Haproxy

cd /opt
haproxy-1.5.19.tar.gz		##上传压缩包
yum install -y pcre-devel bzip2-devel gcc gcc-c++ make	##安装依赖环境
tar zxvf haproxy-1.5.19.tar.gz	##解压
cd haproxy-1.5.19/
make TARGET=linux2628 ARCH=x86_64
make install

参数说明：

• TARGET=linux2628 ##内核版本
  • 使用uname -r 查看内核，如2.6.18-371.e15，此时该参数用TARGET=linux26；kernel大于2.6.28的用TARGET=linux2628
• ARCH=x86_64 ##系统位数，64位系统

3、Haproxy服务器配置【配置文件解析】

mkdir /etc/haproxy
cp examples/haproxy.cfg /etc/haproxy/
cd /etc/haproxy/
vim haproxy.cfg
	3 global
--------------->4~5行–修改，配置日志记录，local0为日志设备，默认存放到系统日志<----------------------
		4 log /dev/log   local0 info		
		5 log /dev/log   local0 notice
		6 #log loghost    local0 info
		7 maxconn 4096			#最大连接数，需考虑ulimit -n限制
--------------->8行–注释，chroot(改变根目录)，为该服务自设置的根目录，一般需将此行注释掉<----------------------
		8 #chroot /usr/share/haproxy	##注释掉
		9 uid 99					#用户UID
		10 gid 99					#用户GID
		11 daemon				#守护进程模式
		15 defaults        
		16 log     global			#定义日志为global配置中的日志定义
		17 mode    http			#模式为http
		18 option  httplog			#采用http日志格式记录日志
		19 option  dontlognull		#不记录健康检查日志信息
		20 retries 3				#检查节点服务器失败次数，连续达到三次失败，则认为节点不可用
		21 redispatch				#当服务器负载很高时，自动结束当前队列处理比较久的连接
		22 maxconn 2000			#最大连接数
		23 contimeout      5000	   	#连接超时时间
		24 clitimeout      50000			#客户端超时时间
		25 srvtimeout      50000		#服务器超时时间
	--------------->27行之后全部删除，复制以下内容<----------------------
	27 listen  webcluster 0.0.0.0:80		监听web服务集群
   			28 option httpchk GET /test.html		#检查服务器的test.html文件
  			29 balance roundrobin				#负载均衡调度算法使用轮询算法roundrobin
   		 	30 server inst1 192.168.35.10:80 check inter 2000 fall 3		#定义在线节点
   	 		31 server inst2 192.168.35.20:80 check inter 2000 fall 3

参数详解：

• balance roundrobin #负载均衡调度算法
  • 轮询算法：roundrobin
  • 最小连接数算法：leastconn
  • 来源访问调度算法：source hashing，类似于nginx的ip_hash
• check inter 2000 #表示haproxy服务器和节点之间的一个心跳频率
• fall 3 #表示连续三次检测不到心跳频率则认为该节点失效
  • 若节点配置后带有“backup”表示该节点只是个备份节点，只有主节点失效该节点才会上。不携带“backup”，表示为主节点，和其它主节点共同提供服务
    -

4、2台web服务器安装httpd服务

nginx的安装我这里就不详细介绍了，具体请看《Nginx服务基础》这篇文章


编辑测试网页

192.168.35.10：
echo "this is ddd web" > /usr/local/nginx/html/test.html
192.168.35.20：
echo "this is www web" > /usr/local/nginx/html/test.html

5、启动Haproxy服务

cp /opt/haproxy-1.5.19/examples/haproxy.init /etc/init.d/haproxy
cd /etc/init.d/
chmod +x haproxy
chkconfig --add /etc/init.d/haproxy
ln -s /usr/local/sbin/haproxy /usr/sbin/haproxy
service haproxy start

6、测试win端192.168.35.40/test.html

web1的界面

web2的界面

三、Haproxy 日志管理

1. 修改Haproxy配置文件中关于日志配置的选项，加入配置
   log /dev/1oq loac10 info
   log /dev/ log 1oca10 notice
2. 修改rsyslog配置，将haproxy相关配置独立定义到haproxy.conf， 并放到/etc/rsyslog.d/下
3. 保存配置文件并重启rsyslog服务，完成rsyslog配置

四、Haproxy参数优化

随着企业网站负载增加，haproxy参数优化相当重要，具体的优化项如下：

1. maxconn: 最大连接数，根据应用实际情况进行调整，推荐使用10 240
2. daemon: 守护进程模式；Haproxy可以使用非守护进程模式启动，建议使用守护进程模式启动
3. nbproc:负载均衡的并发进程数，建议与当前服务器CPU核数相等或为其2倍
4. retries: 重试次数，主要用于对集群节点的检查，如果节点多，且并发量大，设置为2次或3次
5. option http-server-close: 主动关闭http请求选项， 建议在生产环境中使用此选项
6. timeouthttp-keep-alive:长连接超时时间，设置长连接超时时间，可以设置为10s
7. Limeoul http-requesL: hLLp请求超时时问，建议将此时问设置为5-~10s， 增加http连接释放速度
8. timcout. clicnt: 客户端超时时间，如果访问量过大，节点响应慢，可以将此时间设置短一 些，建议设置为1min左右就可以了

五、小结

1. 常见的web集群调度器分为软件和硬件
2. LVs性能最好，但是搭建相对复杂;Nginx的upstream模块支持群集功能，但是对群集节点健康检查功能不强，高并发性能没有Haproxy好
3. Haproxy是一款可提供高可用性、 负载均衡、及基于TCP和HTTP应用的代理的软件
4. 最常用的调度算法有三种：RR：轮询调度；LC：最小连接数算法；SH：基于来源访问调度算法