redis

Posted 2020-11-29 ming-long

Redis集群

由于内存大小的限制，使用一台 Redis 实例显然无法满足需求，这时就需要使用多台 Redis作为缓存数据库。但是如何保证数据存储的一致性呢,这时就需要搭建redis集群.采用合理的机制,保证用户的正常的访问需求.

采用redis集群,可以保证数据分散存储,同时保证数据存储的一致性.并且在内部实现高可用的机制.实现了服务故障的自动迁移.

集群搭建

主从划分: 3台主机 3台从机共6台  端口划分7000-7005

   通用的概念(不适用redis集群)

   通常情况下,集群(哨兵)的数量都是奇数台(包含主从)

   集群(哨兵)正常工作的条件   存活的服务器数量 > 总数N/2

   1台   不能搭建集群

   2台   不能搭建集群

   3台   2 > 1.5    搭建集群最小单位3台    最多宕机1台

   4台   3 > 2      也可以搭建集群          最多宕机1台

   所以集群的数量一般都是奇数台

1.准备集群文件夹   Mkdir cluster

2.在cluster文件夹中分别创建7000-7005文件夹

 

 

 3.复制配置文件

将redis根目录中的redis.conf文件复制到cluster/7000/ 并以原名保存    cp redis.conf cluster/7000

4.编辑配置文件

1）注释本地绑定IP地址

2）关闭保护模式

 

 

 

3）修改端口号

4）启动后台启动

5）修改pid文件

 

 

 

6）修改持久化文件路径

 

 

 

7）设定内存优化策略

 

 

 

8）关闭AOF模式

 

 

 

 9）开启集群配置

 10）开启集群配置文件

 11）修改集群超时时间

 

 

 2.复制修改后的配置文件

将7000文件夹下的redis.conf文件分别复制到7001-7005中

 

 3.批量修改

分别将7001-7005文件中的7000改为对应的端口号的名称

 

 4. 通过脚本编辑启动/关闭指令

1）创建启动脚本  vim start.sh

 

 2）编辑关闭的脚本    vim  shutdown.sh

5.启动redis节点       sh start.sh

6.创建redis集群

#5.0版本执行 使用C语言内部管理集群
redis-cli --cluster create --cluster-replicas 1 192.168.21.129.130:7000 192.168.35.130:7001 192.168.21.129:7002 192.168.21.129:7003 192.168.21.129:7004 192.168.21.129:7005

 

 

 Redis集群原理(分区)

Redis的所有节点都会保存当前redis集群中的全部主从状态信息.并且每个节点都能够相互通信.当一个节点发生宕机现象.则集群中的其他节点通过PING-PONG检测机制检查Redis节点是否宕机.当有半数以上的节点认为宕机.则认为主节点宕机.同时由Redis剩余的主节点进入选举机制.投票选举链接宕机的主节点的从机.实现故障迁移.

Redis集群宕机条件

集群中如果主机宕机,那么从机可以继续提供服务,

当主机中没有从机时,则向其它主机借用多余的从机.继续提供服务.如果主机宕机时没有从机可用,则集群崩溃.

.例如：9个redis节点,节点宕机5-7次时集群才崩溃.

  Redis hash槽存储数据原理

 RedisCluster采用此分区，所有的键根据哈希函数(CRC16[key]&16383)映射到0－16384槽内，共16384个槽位，每个节点维护部分槽及槽所映射的键值数据.根据主节点的个数,均衡划分区间.

 算法:哈希函数: Hash()=CRC16[key]&16383按位与

 

 当向redis集群中插入数据时,首先将key进行计算.之后将计算结果匹配到具体的某一个槽的区间内,之后再将数据set到管理该槽的节点中。

效率高:

         分片效率高:  发生在服务器中   redis只负责存取

         Redis集群:  发生在redis内部 效率低

 spring整合redis

1.编辑properties文件

#redis集群配置
redis.nodes=192.168.21.129:7000,192.168.21.129:7001,192.168.21.129:7002,192.168.21.129:7003,192.168.21.129:7004,192.168.21.129:7005

  编辑配置类

 

@Configuration // 标识配置类
@PropertySource("classpath:/properties/redis.properties")
public class RedisConfig {
    
    @Value("${redis.nodes}")
    private String redisNodes; //node,node,node
    
    //将Set集合交给容器管理
    @Bean("redisSet")
    public Set<HostAndPort> redisSet(){
        Set<HostAndPort> redisSet = new HashSet<HostAndPort>();
        String[] arrayNodes = redisNodes.split(",");
        for (String node : arrayNodes) { //ip:port
            String host = node.split(":")[0];
            int port = Integer.parseInt(node.split(":")[1]);
            HostAndPort hostAndPort = new HostAndPort(host, port);
            redisSet.add(hostAndPort);
        }
        return redisSet;
    }
    
    @Bean
    @Scope("prototype")
    public JedisCluster jedisCluster(@Qualifier("redisSet")Set<HostAndPort> redisSet) {
        
        return new JedisCluster(redisSet);
    }
}

3.编辑切面

@Component    //将类交给容器管理
@Aspect        //标识切面
public class CacheAspect {
    
 @Autowired
 private JedisCluster jedis; 
//如果是环绕通知,则参数必须写ProceedingJoinPoint,必须位于第一位 @Around("@annotation(cacheFind)") 

............