redis3.0集群部署和测试

Posted 2020-10-24 View

redis3.0集群部署和测试

环境介绍

两台Centos7的虚拟机模拟6个节点，A台3个master节点，B台3个slave节点
A地址：172.16.81.140
B地址：172.16.81.141
redis版本：redis-3.2.4

部署前准备

关闭防火墙--->systemctl stop firewalld
开机禁用防火墙--->systemctl disable firewalld
临时关闭selinux--->setenforce 0
永久关闭selinux--->sed -i \'s/SELINUX=enforcing/SELINUX=disabled/g\' /etc/selinux/config ---> 重启服务器生效

下载并解压redis软件

cd /opt
wget http://download.redis.io/releases/redis-3.2.4.tar.gz
tar -zxvf redis-3.2.4.tar.gz

编译安装

安装依赖包：yum -y install tcl* gcc-c++ 
cd redis-3.2.4
make 
cd src
cp redis-trib.rb /usr/local/bin/ 
make install
make test

创建redis节点

首先在 A 机器上 /opt/redis-3.2.4 目录下创建 redis_cluster 目录
　　mkdir redis_cluster
在redis_cluster目录下创建7000,7001,7002目录
　　cd redis_cluster/
　　mkdir 7000 7001 7002
将配置文件redis.conf拷贝到三个目录下

　　　　cp /opt/redis-3.2.4/redis.conf /opt/redis-3.2.4/redis_cluster/7000

　　　　cp /opt/redis-3.2.4/redis.conf /opt/redis-3.2.4/redis_cluster/7001

　　　　cp /opt/redis-3.2.4/redis.conf /opt/redis-3.2.4/redis_cluster/7002

然后B机器上也是同样的操作，只不过节点目录改为7003，7004,7005三个目录

修改节点配置文件

　 A服务器进入到7000,7001,7002目录下
sed -i \'s/bind 127.0.0.1/bind 172.16.81.140/g\' redis.conf         #更改绑定地址7000,7001,7002绑定A服务器地址
sed -i \'s/port 6379/port 7000/g\' redis.conf                       #更改端口为对应目录的端口号
sed -i \'s/daemonize no/daemonize yes/g\' redis.conf                #开启后台运行
sed -i \'s/redis_6379.pid/redis_7000.pid/g\' redis.conf             #pid文件更改端口为对应目录的端口号
sed -i \'s/appendonly no/appendonly yes/g\' redis.conf              #aof日志开启 有需要就开启，它会每次写操作都记录一条日志
sed -i \'s/# cluster-enabled yes/cluster-enabled yes/g\' redis.conf #开启集群，去掉#号
sed -i \'s/# cluster-config-file nodes-6379.conf/cluster-config-file nodes-7000.conf/g\' redis.conf   #首次运行生成集群配置文件对应的端口号
sed -i \'s/# cluster-node-timeout 15000/cluster-node-timeout 15000/g\' redis.conf   #请求超时时间，默认15S

   B服务器进入到7003，7004,7005目录下
sed -i \'s/bind 127.0.0.1/bind 172.16.81.141/g\' redis.conf
sed -i \'s/port 6379/port 7003/g\' redis.conf
sed -i \'s/daemonize no/daemonize yes/g\' redis.conf
sed -i \'s/redis_6379.pid/redis_7003.pid/g\' redis.conf
sed -i \'s/appendonly no/appendonly yes/g\' redis.conf
sed -i \'s/# cluster-enabled yes/cluster-enabled yes/g\' redis.conf
sed -i \'s/# cluster-config-file nodes-6379.conf/cluster-config-file nodes-7003.conf/g\' redis.conf
sed -i \'s/# cluster-node-timeout 15000/cluster-node-timeout 15000/g\' redis.conf

启动redis每个节点

cd /opt/

A机器上执行
redis-server redis_cluster/7000/redis.conf
redis-server redis_cluster/7001/redis.conf
redis-server redis_cluster/7002/redis.conf
 
B机器上执行
redis-server redis_cluster/7003/redis.conf
redis-server redis_cluster/7004/redis.conf
redis-server redis_cluster/7005/redis.conf 

检查启动情况

A服务器：

B服务器：

 

启动正常！！！

 创建REDIS集群

redis-trib.rb create --replicas 1 172.16.81.140:7000 172.16.81.140:7001 172.16.81.140:7002 172.16.81.141:7003 172.16.81.141:7004 172.16.81.141:7005

安装ruby

redis-trib.rb需要ruby支持，所以需要安装ruby
yum -y install ruby ruby-devel rubygems rpm-build

安装ruby的redis接口

gem install  redis --version 3.2.1
需要根据redis版本安装，否则会报错！

在执行创建redis集群

redis-trib.rb create --replicas 1 172.16.81.140:7000 172.16.81.140:7001 172.16.81.140:7002 172.16.81.141:7003 172.16.81.141:7004 172.16.81.141:7005

集群创建成功！！！

redis集群测试

A服务器：

B服务器：

测试完成！！！

集群大致原理：

redis cluster在设计的时候，就考虑到了去中心化，去中间件，也就是说，集群中的每个节点都是平等的关系，都是对等的，每个节点都保存各自的数据和整个集群的状态。每个节点都和其他所有节点连接，而且这些连接保持活跃，这样就保证了我们只需要连接集群中的任意一个节点，就可以获取到其他节点的数据。

Redis 集群没有并使用传统的一致性哈希来分配数据，而是采用另外一种叫做哈希槽 (hash slot)的方式来分配的。redis cluster 默认分配了 16384 个slot，当我们set一个key 时，会用CRC16算法来取模得到所属的slot，然后将这个key 分到哈希槽区间的节点上，具体算法就是：CRC16(key) % 16384。所以我们在测试的时候看到set 和 get 的时候，直接跳转到了7000端口的节点。

Redis 集群会把数据存在一个 master 节点，然后在这个 master 和其对应的salve 之间进行数据同步。当读取数据时，也根据一致性哈希算法到对应的 master 节点获取数据。只有当一个master 挂掉之后，才会启动一个对应的 salve 节点，充当 master 。

需要注意的是：必须要3个或以上的主节点，否则在创建集群时会失败，并且当存活的主节点数小于总节点数的一半时，整个集群就无法提供服务了。