Redis主从sentinel故障自动切换

Posted 2020-08-24

一、什么是redis主从复制？

主从复制，当用户往Master端写入数据时，通过Redis Sync机制将数据文件发送至Slave，Slave也会执行相同的操作确保数据一致；且实现Redis的主从复制非常简单。

 

二、redis主从复制特点

1、同一个Master可以拥有多个Slaves。

2、Master下的Slave还可以接受同一架构中其它slave的链接与同步请求，实现数据的级联复制，即Master->Slave->Slave模式；

3、Master以非阻塞的方式同步数据至slave，这将意味着Master会继续处理一个或多个slave的读写请求；

4、Slave端同步数据也可以修改为非阻塞是的方式，当slave在执行新的同步时，它仍可以用旧的数据信息来提供查询；否则，当slave与master失去联系时，slave会返回一个错误给客户端；

5、主从复制具有可扩展性，即多个slave专门提供只读查询与数据的冗余，Master端专门提供写操作；

6、通过配置禁用Master数据持久化机制，将其数据持久化操作交给Slaves完成，避免在Master中要有独立的进程来完成此操作。

三、redis主从复制原理

      当启动一个Slave进程后，它会向Master发送一个SYNC Command，请求同步连接。无论是第一次连接还是重新连接，Master都会启动一个后台进程，将数据快照保存到数据文件中，同时Master会记录所有修改数据的命令并缓存在数据文件中。后台进程完成缓存操作后，Master就发送数据文件给Slave，Slave端将数据文件保存到硬盘上，然后将其在加载到内存中，接着Master就会所有修改数据的操作，将其发送给Slave端。若Slave出现故障导致宕机，恢复正常后会自动重新连接，Master收到Slave的连接后，将其完整的数据文件发送给Slave，如果Mater同时收到多个Slave发来的同步请求，Master只会在后台启动一个进程保存数据文件，然后将其发送给所有的Slave，确保Slave正常。

四、配置过程

Jemalloc安装

#yum install -y tcl gcc gcc-c++  make bzip2

#wgethttp://www.canonware.com/download/jemalloc/jemalloc-4.2.0.tar.bz2

#tar -xjf jemalloc-4.2.0.tar.bz2

#cd jemalloc-4.2.0

#./configure --prefix=/usr/local/jemalloc --libdir=/usr/local/lib

#make && make install

#make clean

#echo "/usr/local/lib" >/etc/ld.so.conf.d/usr_local_lib.conf

#/sbin/ldconfig

 

Redis安装

#cd ../

#wget http://download.redis.io/releases/redis-3.2.0.tar.gz

#cd redis-3.2.0

#make MALLOC=jemalloc

#make install

#cd utils/

#./install_server.sh

 

安装配置和数据路径可以定义：

Selected config:

Port           :6379

Config file    : /etc/redis/6379.conf

Log file       :/var/log/redis_6379.log

Data dir       : /data/redis

Executable     : /usr/local/bin/redis-server

Cli Executable : /usr/local/bin/redis-cli

Is this ok? Then press ENTER to go on or Ctrl-C to abort.

Copied /tmp/6379.conf =>/etc/init.d/redis_6379

 

Redis设置内存大小

打开redis配置文件

#vim /etc/redis/6379.conf

增加如下两行

maxmemory 12g              
maxmemory-policy volatile-lru   

第一行：Redis设置最大占用内存，一般推荐Redis设置内存为最大物理内存的四分之三。

第二行：如果设置了maxmemory，一般都要设置过期策略。

Redis有六种过期策略：

1、volatile-lru -> 根据LRU算法生成的过期时间来删除。

2、allkeys-lru -> 根据LRU算法删除任何key。

3、volatile-random-> 根据过期设置来随机删除key。

4、allkeys->random-> 无差别随机删。

5、volatile-ttl -> 根据最近过期时间来删除（辅以TTL）

6、noeviction -> 谁也不删，直接在写操作时返回错误。

 

配置完成重启redis

查看配置是否生效

#redis-cli info

 

 

主从：

192.168.1.76  主

192.168.1.77  从

两台分别安装redis

安装好之后，在从192.168.1.77的redis配置文件修改bind并增加一行参数

#vim /etc/redis/6379.conf

bind 0.0.0.0

slaveof 192.168.1.76  6379

启动两台redis

在主192.168.1.76执行

#redis-cli

>set name ceshi

>get name

在从192.168.1.77执行

#redis-cli

>get name

如果可以get到ceshi，代表主从成功

 

Sentinel哨兵：

在其中一台redis上或者随便找一台服务器安装,如果只安装一个sentinel并要安装在redis服务器上，建议在从上搭建sentinel，这样保证了主宕机之后不会影响主从切换，从宕机不会影响主的运行

#vim /etc/redis/sentinel.conf

port 26379   
daemonize yes
sentinel monitor mymaster 192.168.1.76 6379 1
sentinel down-after-milliseconds mymaster 30000
sentinel parallel-syncs mymaster 1
sentinel failover-timeout mymaster 900000
logfile "/var/log/sentinel.log"

注释：

第一行：指定sentinel端口号

第二行：指定sentinel为后台启动

第三行：指定sentinel去监视一个名为mymaster的Master，Master的IP地址为192.168.1.76，

端口为6379,最后的1表示当有1个Sentinel检测到Master异常时会判定其失效，如果为2，即只有当2个Sentinel都判定Master失效了才会自动迁移，如果Sentinel的数量不达标，则不会执行自动故障迁移。

第四行：指定Sentinel判定Master断线的时间。（单位为毫秒，判定为主观下线SDOWN）

第五行：指定在执行故障转移时，最多可以有多少个Slave同时对新的Master进行同步。这个数字设置为1，虽然完成故障转移所需的时间会变长，但是可以保证每次只有1个Slave处于不能处理命令请求的状态。

第六行：如果在该时间（ms）内未能完成failover（即故障时master/slave自动切换

）操作，则认为该failover失败。

第七行：指定Sentinel日志文件。

 

启动

#redis-sentinel /etc/redis/sentinel.conf

 

测试：

使用如下命令查看

#redis-cli -h 192.168.1.76 -p 6379 info

将主192.168.1.76的redis停掉，会发现从192.168.1.77切换为主了

将主192.168.1.76的redis启动，会发现自动添加为从服务器了

 

Redis数据迁移

1、在旧redis执行redis-clisave将数据保存到磁盘文件dump.rdb

2、停止新redis

3、将旧的redis保存后的磁盘文件dump.rdb拷贝到新的redis数据目录下

4、启动新的redis