又一代理服务器~~haproxy搭建集群

Posted 可乐卷儿

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了又一代理服务器~~haproxy搭建集群相关的知识,希望对你有一定的参考价值。

提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档

一、Haproxy简介

1、常见的wed集群调度器

目前常见的Web集群调度器分为软件和硬件

  • 软件:
    通常使用开源的LVS、Haproxy、nginx
  • 硬件:
    一般使用比较多的是F5,也有很多人使用国内的一些产品,如梭子鱼、绿盟(裸金属)等

2、Haproxy的应用

  • Haproxy是一款可提供高可用性、 负载均衡、及基于TCP和HTTP应用的代理的软件
    • 适用于负载大的Web站点
    • 运行在硬件上可支持数以万计的并发连接的连接请求

3、Haproxy的优点

序号具体内容
Haproxy在负载均衡速度和并发处理上是优于Nginx
Haproxy支持虚拟主机,可以工作在4、7层
能够补充Nginx (ip_ hash) 的一些缺点,比如session的保持、Cookie的引导等工作
支持以ur1的方式检测后端的服务器的状态
Haproxy可以对mysql进行负载均衡,对后端的DB节点进行检测和负载均衡
支持很多负载均衡算法(丰富),Round-robin (轮询)、weighl-round- robin(加权轮询)、source hashing (原地址保持)、 RI (请求URL)、 rdp-cookie (根 据cookie)

4、Haproxy调度算法原理

Haproxy支持多种调度算法,最常用的有三种

  • RR (Round Robin):轮询调度
    • 举例:有2个节点a、b
      第一个用户访问会被指派的节点是a
      第二个用户访问会被指派的节点是b
      第三个用户访问会被指派的节点是a
      循环往复
  • LC (Least|Connections):最小连接数算法,根据后端的节点连接数大小动态分配前端请求
    • 举例:有三个节点a、b、c,连接数分别为1、2、3
      第一个用户连接请求时,会被指派到a上,连接数变为2、2、3
      第二个用户请求会继续分配给a,连接数变为3、2、3
      第三个用户连接请求时,会分配给b
      以此类推
  • SH (Source Hashing):基于来源访问调度算法,用于一些有Session会话记录在服务器端的场景,可以基于来源的IP、Cookie等做集群调度
    • 举例:有三个节点a、b、c
      第一个用户第一次访问被指派到了a,第二个用户第一次访问被指派到了b
      第一个用户第二次访问会被继续指派到a,第二个用户第二次访问时依旧会被指派到b
      只要负载均衡调度器不重启,第一个用户访问都会被指派到a,第二个用户访问都会被指派到b,永远轮不到c

5、nginx和LVS、 Haproxy的区别

  • nginx
    • 支持正则
    • 只支持基于端C1的健康检查
    • 不支持session的直接保持,但能通过IP_ hash来解决
    • 对网络稳定性要求不高
    • 反向代理能力强
    • nginx社区活跃( 社区:维护、更新服务的组织)、收费社区
  • LVS
    • 只能基于四层端口转发
    • 在四层做分发作用,抗负载能力强
    • 应用范围广(几乎可以对所有应用做负载)
  • Haproxy .
    • 支持8种负载均衡策略
    • 仅做负载均衡软件使用,在高并发情况下性能优于nginx
    • 支持URL健康检测、支持session保持

二、搭建Haproxy代理服务器

1、实验环境

角色ip
Haproxy192.168.35.40
web1192.168.35.10
web2192.168.35.20
wind10192.168.10.100

2、安装Haproxy

cd /opt
haproxy-1.5.19.tar.gz		##上传压缩包
yum install -y pcre-devel bzip2-devel gcc gcc-c++ make	##安装依赖环境
tar zxvf haproxy-1.5.19.tar.gz	##解压
cd haproxy-1.5.19/
make TARGET=linux2628 ARCH=x86_64
make install


参数说明:

  • TARGET=linux2628 ##内核版本
    • 使用uname -r 查看内核,如2.6.18-371.e15,此时该参数用TARGET=linux26;kernel大于2.6.28的用TARGET=linux2628
  • ARCH=x86_64 ##系统位数,64位系统

3、Haproxy服务器配置【配置文件解析】

mkdir /etc/haproxy
cp examples/haproxy.cfg /etc/haproxy/
cd /etc/haproxy/
vim haproxy.cfg
	3 global
--------------->4~5行–修改,配置日志记录,local0为日志设备,默认存放到系统日志<----------------------
		4 log /dev/log   local0 info		
		5 log /dev/log   local0 notice
		6 #log loghost    local0 info
		7 maxconn 4096			#最大连接数,需考虑ulimit -n限制
--------------->8行–注释,chroot(改变根目录),为该服务自设置的根目录,一般需将此行注释掉<----------------------
		8 #chroot /usr/share/haproxy	##注释掉
		9 uid 99					#用户UID
		10 gid 99					#用户GID
		11 daemon				#守护进程模式
		15 defaults        
		16 log     global			#定义日志为global配置中的日志定义
		17 mode    http			#模式为http
		18 option  httplog			#采用http日志格式记录日志
		19 option  dontlognull		#不记录健康检查日志信息
		20 retries 3				#检查节点服务器失败次数,连续达到三次失败,则认为节点不可用
		21 redispatch				#当服务器负载很高时,自动结束当前队列处理比较久的连接
		22 maxconn 2000			#最大连接数
		23 contimeout      5000	   	#连接超时时间
		24 clitimeout      50000			#客户端超时时间
		25 srvtimeout      50000		#服务器超时时间
	--------------->27行之后全部删除,复制以下内容<----------------------
	27 listen  webcluster 0.0.0.0:80		监听web服务集群
   			28 option httpchk GET /test.html		#检查服务器的test.html文件
  			29 balance roundrobin				#负载均衡调度算法使用轮询算法roundrobin
   		 	30 server inst1 192.168.35.10:80 check inter 2000 fall 3		#定义在线节点
   	 		31 server inst2 192.168.35.20:80 check inter 2000 fall 3

参数详解:

  • balance roundrobin #负载均衡调度算法
    • 轮询算法:roundrobin
    • 最小连接数算法:leastconn
    • 来源访问调度算法:source hashing,类似于nginx的ip_hash
  • check inter 2000 #表示haproxy服务器和节点之间的一个心跳频率
  • fall 3 #表示连续三次检测不到心跳频率则认为该节点失效
    • 若节点配置后带有“backup”表示该节点只是个备份节点,只有主节点失效该节点才会上。不携带“backup”,表示为主节点,和其它主节点共同提供服务
      -

4、2台web服务器安装httpd服务

nginx的安装我这里就不详细介绍了,具体请看《Nginx服务基础》这篇文章


编辑测试网页

192.168.35.10:
echo "this is ddd web" > /usr/local/nginx/html/test.html
192.168.35.20:
echo "this is www web" > /usr/local/nginx/html/test.html

5、启动Haproxy服务

cp /opt/haproxy-1.5.19/examples/haproxy.init /etc/init.d/haproxy
cd /etc/init.d/
chmod +x haproxy
chkconfig --add /etc/init.d/haproxy
ln -s /usr/local/sbin/haproxy /usr/sbin/haproxy
service haproxy start

6、测试win端192.168.35.40/test.html

web1的界面

web2的界面

三、Haproxy 日志管理

  1. 修改Haproxy配置文件中关于日志配置的选项,加入配置
    log /dev/1oq loac10 info
    log /dev/ log 1oca10 notice
  2. 修改rsyslog配置,将haproxy相关配置独立定义到haproxy.conf, 并放到/etc/rsyslog.d/下
  3. 保存配置文件并重启rsyslog服务,完成rsyslog配置

四、Haproxy参数优化

随着企业网站负载增加,haproxy参数优化相当重要,具体的优化项如下:

  1. maxconn: 最大连接数,根据应用实际情况进行调整,推荐使用10 240
  2. daemon: 守护进程模式;Haproxy可以使用非守护进程模式启动,建议使用守护进程模式启动
  3. nbproc:负载均衡的并发进程数,建议与当前服务器CPU核数相等或为其2倍
  4. retries: 重试次数,主要用于对集群节点的检查,如果节点多,且并发量大,设置为2次或3次
  5. option http-server-close: 主动关闭http请求选项, 建议在生产环境中使用此选项
  6. timeouthttp-keep-alive:长连接超时时间,设置长连接超时时间,可以设置为10s
  7. Limeoul http-requesL: hLLp请求超时时问,建议将此时问设置为5-~10s, 增加http连接释放速度
  8. timcout. clicnt: 客户端超时时间,如果访问量过大,节点响应慢,可以将此时间设置短一 些,建议设置为1min左右就可以了

五、小结

  1. 常见的web集群调度器分为软件和硬件
  2. LVs性能最好,但是搭建相对复杂;Nginx的upstream模块支持群集功能,但是对群集节点健康检查功能不强,高并发性能没有Haproxy好
  3. Haproxy是一款可提供高可用性、 负载均衡、及基于TCP和HTTP应用的代理的软件
  4. 最常用的调度算法有三种:RR:轮询调度;LC:最小连接数算法;SH:基于来源访问调度算法

以上是关于又一代理服务器~~haproxy搭建集群的主要内容,如果未能解决你的问题,请参考以下文章

使用Haproxy搭建web集群

haproxy+nginx搭建web集群

haproxy+nginx搭建web集群

Haproxy搭建Web群集

Haproxy搭建Web群集

HaProxy代理,搭建高可用的web集群