redis-setnx 不可重入分布式锁实现

Posted 架构师前线

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了redis-setnx 不可重入分布式锁实现相关的知识,希望对你有一定的参考价值。


通常如果在单机jvm环境,可以使用synchronized或juc ReentrantLock 实现资源锁机制,但如果是分布式系统,则需要借助第三方工具实现,比如redis、zookeeper等。redis为单进程单线程模式,操作都是原子过程,采用队列模式将并发访问变成串行访问,且多客户端对redis的连接并不存在竞争关系。本文参考redis官网setnx命令篇及其他Coder分享,实现基于redis的准生产级不可重入分布式锁。


一、redis 基本命令

setnx 命令(『SET if Not eXists』(如果不存在,则 SET)的简写):

    设置成功,返回 1 。

    设置失败,返回 0 。

该命令是原子操作。

getset 命令:

    自动将key对应到value并且返回原来key对应的value。如果key存在但是对应的value不是字符串,就返回错误。

    * 返回值 *:

    返回之前的旧值,如果之前Key不存在将返回nil。

该命令是原子操作。

get 命令:

    get <key> 获取key的值,如果存在,则返回;如果不存在,则返回nil;

del 命令

    del <key> 删除key及key对应的值,如果key不存在,程序忽略


二、使用SETNX实现分布式锁

redis官网推荐的setnx实现分布式锁如下,多个进程执行以下Redis命令:

setnx lock.foo {current Unix time + lock timeout + 1}

如果 SETNX 返回1,说明该进程获得锁,SETNX将键 lock.foo 的值设置为锁的超时时间(当前时间 + 锁的有效时间)。如果 SETNX 返回0,说明其他进程已经获得了锁,进程不能进入临界区。进程可以在一个循环中不断地尝试 SETNX 操作,以获得锁。


三、死锁问题

基于setnx、getset命令的分布式锁实现过程中如果细节不反复测试,很容易出现死锁问题:

考虑一种情况,如果进程获得锁后,断开了与 Redis 的连接(可能是进程挂掉,或者网络中断),如果没有有效的释放锁的机制,那么其他进程都会处于一直等待的状态,即出现“死锁”。上面在使用 SETNX 获得锁时,我们将键 lock.foo 的值设置为锁的有效时间,进程获得锁后,其他进程还会不断的检测锁是否已超时,如果超时,那么等待的进程也将有机会获得锁。然而,锁超时时,我们不能简单地使用 DEL 命令删除键 lock.foo 以释放锁。考虑以下情况,进程P1已经首先获得了锁 lock.foo,然后进程P1挂掉了。进程P2,P3正在不断地检测锁是否已释放或者已超时,执行流程如下:

  • P2和P3进程读取键 lock.foo 的值,检测锁是否已超时(通过比较当前时间和键 lock.foo 的值来判断是否超时)

  • P2和P3进程发现锁 lock.foo 已超时

  • P2执行 DEL lock.foo命令

  • P2执行 SETNX lock.foo命令,并返回1,即P2获得锁

  • P3执行 DEL lock.foo命令将P2刚刚设置的键 lock.foo 删除(这步是由于P3刚才已检测到锁已超时)

  • P3执行 SETNX lock.foo命令,并返回1,即P3获得锁

  • P2和P3同时获得了锁

从上面的情况可以得知,在检测到锁超时后,进程不能直接简单地执行 DEL 删除键的操作以获得锁。为了解决上述算法可能出现的多个进程同时获得锁的问题,我们再来看以下的算法。 

我们同样假设进程P1已经首先获得了锁 lock.foo,然后进程P1挂掉了。接下来的情况:

  • 进程P4执行 SETNX lock.foo 以尝试获取锁

  • 由于进程P1已获得了锁,所以P4执行 SETNX lock.foo 返回0,即获取锁失败

  • P4执行 GET lock.foo 来检测锁是否已超时,如果没超时,则等待一段时间,再次检测

  • 如果P4检测到锁已超时,即当前的时间大于键 lock.foo 的值,P4会执行以下操作 

   getset lock.foo {current Unix timestamp + lock timeout + 1}

  • 由于 GETSET 操作在设置键的值的同时,还会返回键的旧值,通过比较键 lock.foo 的旧值是否小于当前时间,可以判断进程是否已获得锁。

  • 假如另一个进程P5也检测到锁已超时,并在P4之前执行了 GETSET 操作,那么P4的 GETSET 操作返回的是一个大于当前时间的时间戳,这样P4就不会获得锁而继续等待。注意到,即使P4接下来将键 lock.foo 的值设置了比P5设置的更大的值也没影响。

  • 另外,值得注意的是,在进程释放锁,即执行 DEL lock.foo 操作前,需要先判断锁是否已超时。如果锁已超时,那么锁可能已由其他进程获得,这时直接执行 DEL lock.foo 操作会导致把其他进程已获得   的锁释放掉。


四、代码实现

本文基于jedis2.9, 以java语言代码实现,如下:


测试代码入口:

   private static final String lockKey = "lock:user_13";  

   public static void main(String[] args) {  

        Jedis jedis = new Jedis("127.0.0.1", 6379);  

   

        DistributedLockHandler distributedLockHandler = new DistributedLockHandler().setJedis(jedis);  

        try{  

            boolean getLock = distributedLockHandler.tryLock(lockKey, Long.valueOf(5));  

            if(getLock){  

                // Do your job  

                System.out.println("Do your job........");  

            }  

        }catch(Exception e){  

            System.out.println(e);  

        }finally {  

            distributedLockHandler.realseLock(lockKey);  

        }

    }    


分布式锁实现代码:

public class DistributedLockHandler {  

    private static final Integer Lock_Timeout = 3;  

    private Jedis jedis;  

  

    /** 

     * 外部调用加锁的方法 

     * @param lockKey 锁的key 

     * @param timeout 超时时间(放置时间长度,如:5L) 

     * @return 

     */  

    public boolean tryLock(String lockKey, Long timeout) {  

        try {  

            Long currentTime = System.currentTimeMillis();//开始加锁的时间  

            boolean result = false;  

              

            while (true) {  

                if ((System.currentTimeMillis() - currentTime) / 1000 > timeout) {//当前时间超过了设定的超时时间  

                    System.out.println("Execute DistributedLockHandler.tryLock method, Time out.");  

                    break;  

                } else {  

                    result = innerTryLock(lockKey);  

                    if (result) {  

                        break;  

                    } else {  

                        System.out.println("Try to get the Lock,and wait 100 millisecond....");  

                        Thread.sleep(100);  

                    }  

                }  

            }  

            return result;  

        } catch (Exception e) {  

            System.out.println("Failed to run DistributedLockHandler.getLock method."+ e);  

            return false;  

        }  

    }  

      

    /** 

     * 释放锁 

     * @param lockKey 锁的名字 

     */  

    public void realseLock(String lockKey) {  

        if(!checkIfLockTimeout(System.currentTimeMillis(), lockKey)){  

            jedis.del(lockKey);  

        }  

    }  

      

    /** 

     * 内部获取锁的实现方法 

     * @param lockKey 锁的名字 

     * @return 

     */  

    private boolean innerTryLock(String lockKey) {  

          

        long currentTime = System.currentTimeMillis();//当前时间  

        String lockTimeDuration = String.valueOf(currentTime + Lock_Timeout + 1);//锁的持续时间  

        Long result = jedis.setnx(lockKey, lockTimeDuration);  

          

        if (result == 1) {  

            return true;  

        } else {  

            if (checkIfLockTimeout(currentTime, lockKey)) {  

                String preLockTimeDuration = jedis.getSet(lockKey, lockTimeDuration);  

                if (currentTime > Long.valueOf(preLockTimeDuration)) {  

                    return true;  

                }  

            }  

            return false;  

        }  

    }  

  

    /** 

     * 判断加锁是否超时 

     * @param currentTime 当前时间 

     * @param lockKey 锁的名字 

     * @return 

     */  

    private boolean checkIfLockTimeout(Long currentTime, String lockKey) {  

        if (currentTime > Long.valueOf(jedis.get(lockKey))) {//当前时间超过锁的持续时间  

            return true;  

        } else {  

            return false;  

        }  

    }  

  

    public DistributedLockHandler setJedis(Jedis jedis) {  

        this.jedis = jedis;  

        return this;  

    }  

}  


上述代码已完整实现基于redis setnx的分布式锁,不过该锁机制是不可重入的,与juc中ReentrantLock 可重入锁仍存在距离,之后再分章节实现基于setnx的可重入锁。


以上是关于redis-setnx 不可重入分布式锁实现的主要内容,如果未能解决你的问题,请参考以下文章

Curator实现分布式锁(可重入 不可重入 读写 联锁 信号量 栅栏 计数器)

使用zookeeper序列节点实现不可重入的分布式锁

使用Redis单实例实现不可重入的分布式锁

分布式锁实现介绍

一文看懂的 Zookeeper 分布式锁!

redis实现分布式锁