Redis项目实战---应用及理论---Jedis使用

Posted 2022-05-21 huyangshu-fs

Jedis即redis java客户端，源码地址：https://github.com/xetorthio/jedis

pom配置：

<dependency>

   <groupId>redis.clients</groupId>

    <artifactId>jedis</artifactId>

    <version>3.0.1</version>

    <type>jar</type>

    <scope>compile</scope>

</dependency>

 

 

1）连接单机版

     public void testJedis() throws Exception 
          // 第一步：创建一个Jedis对象。需要指定服务端的ip及端口。
          Jedis jedis = new Jedis("192.168.**.**", 6379);
          // 第二步：使用Jedis对象操作数据库，每个redis命令对应一个方法。
          String result = jedis.get("hello");
          // 第三步：打印结果。
          System.out.println(result);
          // 第四步：关闭Jedis
          jedis.close();
     

2） 连接单机版使用连接池

     public void testJedisPool() throws Exception 
          // 第一步：创建一个JedisPool对象。需要指定服务端的ip及端口。
          JedisPool jedisPool = new JedisPool("192.168.**.**", 6379);
          // 第二步：从JedisPool中获得Jedis对象。
          Jedis jedis = jedisPool.getResource();
          // 第三步：使用Jedis操作redis服务器。
          jedis.set("jedis", "test");
          String result = jedis.get("jedis");
          System.out.println(result);
          // 第四步：操作完毕后关闭jedis对象，连接池回收资源。
          jedis.close();
          // 第五步：关闭JedisPool对象。
          jedisPool.close();
     

3） 连接集群版

     public void testJedisCluster() throws Exception 
          // 第一步：使用JedisCluster对象。需要一个Set<HostAndPort>参数。Redis节点的列表。
          Set<HostAndPort> nodes = new HashSet<>();
          nodes.add(new HostAndPort("192.168.**.**", 7001));
          nodes.add(new HostAndPort("192.168.**.**", 7002));
          nodes.add(new HostAndPort("192.168.**.**", 7003));
          nodes.add(new HostAndPort("192.168.**.**", 7004));
          nodes.add(new HostAndPort("192.168.**.**", 7005));
          nodes.add(new HostAndPort("192.168.**.**", 7006));
          JedisCluster jedisCluster = new JedisCluster(nodes);
          // 第二步：直接使用JedisCluster对象操作redis。在系统中单例存在。
          jedisCluster.set("hello", "100");
          String result = jedisCluster.get("hello");
          // 第三步：打印结果
          System.out.println(result);
          // 第四步：系统关闭前，关闭JedisCluster对象。
          jedisCluster.close();
     

 

4）JedisPool初始化配置：

private static final int taskCount = 50; // 并发任务 
private static final int batchSize = 10; // pipeline大小 
private static final int cmdCount = 1000;// 每个任务处理命令数 
private static final boolean usePipeline = true;
 
JedisPoolConfig poolConfig = new JedisPoolConfig();
poolConfig.setMaxActive(200);
poolConfig.setMaxIdle(100);
poolConfig.setMaxWait(2000);
poolConfig.setTestOnBorrow(false);
poolConfig.setTestOnReturn(false);
jedisPool = new JedisPool(poolConfig, host, port);

5）Jedis 消息发布与订阅API

   5.1）消息订阅

　　　

   public void subscribeChannal()
       //从jedisPool中获取一个jedis对象
       Jedis jds = RedisInsUtil.getJedis();
       // 方式1 订阅得到信息在lister的onPMessage(...)方法中进行处理  
       jds.psubscribe(this, new String[]"channal01","channal02");

　　    // 方式2 订阅得到信息在lister的onMessage(...)方法中进行处理  (普通订阅方式)
　　    //jedis.subscribe(listener, "foo", "watson");  
    
     
    // 初始化订阅时候的处理 
    @Override
    public void onSubscribe(String channel, int subscribedChannels)  
     
     
     // 初始化按表达式的方式订阅时候的处理
     @Override
     public void onPSubscribe(String pattern, int subscribedChannels) 
     

     @Override
     // 取得按表达式的方式订阅的消息后的处理 
     public void onPMessage(String pattern, String channel, String message) 
         LOG.info("onPMessage()," + pattern + "=" + channel + ",msg="+ message);
     
     
     // 取得订阅的消息后的处理 
     public void onMessage(String channel, String message) 
     

     5.2）消息发布

             发布消息只用调用Jedis的publish(...)方法即可。

    Jedis jedis = ru.getConnection(); //获取一个jedis对象，自行封装工具类 
    jedis.publish("hello_foo", "bar123");  

 

6) 管道

原理：

    Redis客户端与Redis服务器之间使用TCP协议进行连接，管道（pipeline）可以一次性发送多条命令并在执行完后一次性将结果返回，pipeline通过减少客户端与redis的通信次数来实现降低往返延时时间，而且Pipeline 实现的原理是队列，而队列的原理是时先进先出，这样就保证数据的顺序性。 

    缺陷：需要注意到是用 pipeline方式打包命令发送，redis必须在处理完所有命令前先缓存起所有命令的处理结果。打包的命令越多，缓存消耗内存也越多。所以并不是打包的命令越多越好。具体多少合适需要根据具体情况测试。

   备注：Pipeline 的默认的同步的个数为53个，也就是说arges中累加到53条数据时会把数据提交；

  

7）扩展：

    由于redis-cluster的hash分片，JedisCluster对象原生并不支持Pipline管道和keys方法。然而，实际项目中在追求性能以及考虑到Redis集群版和单机版兼容或切换问题，往往需要支持这些方法，通过整理网上的部分资料，现给出以下思路，具体方法可参考gitHub示例

   

  管道Pipline实现思路：

 

  Redis集群规范: Redis 集群的键空间被分割为 16384 个槽（slot）， 集群的最大节点数量也是 16384 个。每个主节点都负责处理 16384 个哈希槽的其中一部分。当一个集群处于“稳定”（stable）状态时（群没有在执行重配置（reconfiguration）操作）， 每个哈希槽都只由一个节点进行处理(hash Slot的分配是由CRC16算法计算)。

 故， 

  1.根据要插入的key知道这个key所对应的槽的号码（JedisClusterCRC16.getSlot(key)）, 再通过这个槽的号码从集群中找到对应Jedis（通过每个节点的slot分布，就知道了哪些key应该在哪些节点上）。

  2.相同槽位的key，使用同一个jedis.pipeline去执行命令。

  3.合并此次pipeline所有的response返回。

 

  keys实现思路：

     循环集群中所有的节点（分别获取j对应的client对象），然后每个节点做keys，最后再加到一块返回。

   

  备注：每次执行前需要刷新以获取最新的slot分布。