Redis 分布式锁的正确实现方式( Java 版 )
转载自:http://wudashan.cn/2017/10/23/Redis-Distributed-Lock-Implement/
前言
分布式锁一般有三种实现方式:1. 数据库乐观锁;2. 基于 Redis 的分布式锁;3. 基于 ZooKeeper 的分布式锁。本篇博客将介绍第二种方式,基于 Redis 实现分布式锁。虽然网上已经有各种介绍 Redis 分布式锁实现的博客,然而他们的实现却有着各种各样的问题,为了避免误人子弟,本篇博客将详细介绍如何正确地实现 Redis 分布式锁。
可靠性
首先,为了确保分布式锁可用,我们至少要确保锁的实现同时满足以下四个条件:
- 互斥性。在任意时刻,只有一个客户端能持有锁。
- 不会发生死锁。即使有一个客户端在持有锁的期间崩溃而没有主动解锁,也能保证后续其他客户端能加锁。
- 具有容错性。只要大部分的 Redis 节点正常运行,客户端就可以加锁和解锁。
- 解铃还须系铃人。加锁和解锁必须是同一个客户端,客户端自己不能把别人加的锁给解了。
代码实现
组件依赖
首先我们要通过 Maven 引入Jedis
开源组件,在pom.xml
文件加入下面的代码:
<dependency>
<groupId>redis.clients</groupId>
<artifactId>jedis</artifactId>
<version>2.9.0</version>
</dependency>
加锁代码
正确姿势
Talk is cheap, show me the code。先展示代码,再带大家慢慢解释为什么这样实现:
public class RedisTool {
<span class="hljs-keyword">private</span> <span class="hljs-keyword">static</span> <span class="hljs-keyword">final</span> <span class="hljs-type">String</span> <span class="hljs-variable">LOCK_SUCCESS</span> <span class="hljs-operator">=</span> <span class="hljs-string">"OK"</span>;
<span class="hljs-keyword">private</span> <span class="hljs-keyword">static</span> <span class="hljs-keyword">final</span> <span class="hljs-type">String</span> <span class="hljs-variable">SET_IF_NOT_EXIST</span> <span class="hljs-operator">=</span> <span class="hljs-string">"NX"</span>;
<span class="hljs-keyword">private</span> <span class="hljs-keyword">static</span> <span class="hljs-keyword">final</span> <span class="hljs-type">String</span> <span class="hljs-variable">SET_WITH_EXPIRE_TIME</span> <span class="hljs-operator">=</span> <span class="hljs-string">"PX"</span>;
<span class="hljs-comment">/**
* 尝试获取分布式锁
* <span class="hljs-doctag">@param</span> jedis Redis客户端
* <span class="hljs-doctag">@param</span> lockKey 锁
* <span class="hljs-doctag">@param</span> requestId 请求标识
* <span class="hljs-doctag">@param</span> expireTime 超期时间
* <span class="hljs-doctag">@return</span> 是否获取成功
*/</span>
<span class="hljs-keyword">public</span> <span class="hljs-keyword">static</span> <span class="hljs-type">boolean</span> <span class="hljs-title function_">tryGetDistributedLock</span><span class="hljs-params">(Jedis jedis, String lockKey, String requestId, <span class="hljs-type">int</span> expireTime)</span> {
<span class="hljs-type">String</span> <span class="hljs-variable">result</span> <span class="hljs-operator">=</span> jedis.set(lockKey, requestId, SET_IF_NOT_EXIST, SET_WITH_EXPIRE_TIME, expireTime);
<span class="hljs-keyword">if</span> (LOCK_SUCCESS.equals(result)) {
<span class="hljs-keyword">return</span> <span class="hljs-literal">true</span>;
}
<span class="hljs-keyword">return</span> <span class="hljs-literal">false</span>;
}
}
可以看到,我们加锁就一行代码:jedis.set(String key, String value, String nxxx, String expx, int time)
,这个 set() 方法一共有五个形参:
-
第一个为 key,我们使用 key 来当锁,因为 key 是唯一的。
-
第二个为 value,我们传的是 requestId,很多童鞋可能不明白,有 key 作为锁不就够了吗,为什么还要用到 value?原因就是我们在上面讲到可靠性时,分布式锁要满足第四个条件解铃还须系铃人,通过给 value 赋值为 requestId,我们就知道这把锁是哪个请求加的了,在解锁的时候就可以有依据。requestId 可以使用
UUID.randomUUID().toString()
方法生成。 -
第三个为 nxxx,这个参数我们填的是 NX,意思是 SET IF NOT EXIST,即当 key 不存在时,我们进行 set 操作;若 key 已经存在,则不做任何操作;
-
第四个为 expx,这个参数我们传的是 PX,意思是我们要给这个 key 加一个过期的设置,具体时间由第五个参数决定。
-
第五个为 time,与第四个参数相呼应,代表 key 的过期时间。
总的来说,执行上面的 set() 方法就只会导致两种结果:1. 当前没有锁(key 不存在),那么就进行加锁操作,并对锁设置个有效期,同时 value 表示加锁的客户端。2. 已有锁存在,不做任何操作。
心细的童鞋就会发现了,我们的加锁代码满足我们可靠性里描述的三个条件。首先,set() 加入了 NX 参数,可以保证如果已有 key 存在,则函数不会调用成功,也就是只有一个客户端能持有锁,满足互斥性。其次,由于我们对锁设置了过期时间,即使锁的持有者后续发生崩溃而没有解锁,锁也会因为到了过期时间而自动解锁(即 key 被删除),不会发生死锁。最后,因为我们将 value 赋值为 requestId,代表加锁的客户端请求标识,那么在客户端在解锁的时候就可以进行校验是否是同一个客户端。由于我们只考虑 Redis 单机部署的场景,所以容错性我们暂不考虑。
错误示例 1
比较常见的错误示例就是使用jedis.setnx()
和jedis.expire()
组合实现加锁,代码如下:
public static void wrongGetLock1(Jedis jedis, String lockKey, String requestId, int expireTime) {
<span class="hljs-title class_">Long</span> result = jedis.<span class="hljs-title function_">setnx</span>(lockKey, requestId);
<span class="hljs-keyword">if</span> (result == <span class="hljs-number">1</span>) {
<span class="hljs-comment">// 若在这里程序突然崩溃,则无法设置过期时间,将发生死锁</span>
jedis.<span class="hljs-title function_">expire</span>(lockKey, expireTime);
}
}
setnx()方法作用就是 SET IF NOT EXIST,expire() 方法就是给锁加一个过期时间。乍一看好像和前面的 set()方法结果一样,然而由于这是两条 Redis 命令,不具有原子性,如果程序在执行完 setnx() 之后突然崩溃,导致锁没有设置过期时间。那么将会发生死锁。网上之所以有人这样实现,是因为低版本的 jedis 并不支持多参数的 set() 方法。
错误示例 2
这一种错误示例就比较难以发现问题,而且实现也比较复杂。实现思路:使用jedis.setnx()
命令实现加锁,其中 key 是锁,value 是锁的过期时间。执行过程:1. 通过 setnx() 方法尝试加锁,如果当前锁不存在,返回加锁成功。2. 如果锁已经存在则获取锁的过期时间,和当前时间比较,如果锁已经过期,则设置新的过期时间,返回加锁成功。代码如下:
public static boolean wrongGetLock2(Jedis jedis, String lockKey, int expireTime) {
long expires = <span class="hljs-title class_">System</span>.<span class="hljs-title function_">currentTimeMillis</span>() + expireTime;
<span class="hljs-title class_">String</span> expiresStr = <span class="hljs-title class_">String</span>.<span class="hljs-title function_">valueOf</span>(expires);
<span class="hljs-comment">// 如果当前锁不存在,返回加锁成功</span>
<span class="hljs-keyword">if</span> (jedis.<span class="hljs-title function_">setnx</span>(lockKey, expiresStr) == <span class="hljs-number">1</span>) {
<span class="hljs-keyword">return</span> <span class="hljs-literal">true</span>;
}
<span class="hljs-comment">// 如果锁存在,获取锁的过期时间</span>
<span class="hljs-title class_">String</span> currentValueStr = jedis.<span class="hljs-title function_">get</span>(lockKey);
<span class="hljs-keyword">if</span> (currentValueStr != <span class="hljs-literal">null</span> && <span class="hljs-title class_">Long</span>.<span class="hljs-title function_">parseLong</span>(currentValueStr) < <span class="hljs-title class_">System</span>.<span class="hljs-title function_">currentTimeMillis</span>()) {
<span class="hljs-comment">// 锁已过期,获取上一个锁的过期时间,并设置现在锁的过期时间</span>
<span class="hljs-title class_">String</span> oldValueStr = jedis.<span class="hljs-title function_">getSet</span>(lockKey, expiresStr);
<span class="hljs-keyword">if</span> (oldValueStr != <span class="hljs-literal">null</span> && oldValueStr.<span class="hljs-title function_">equals</span>(currentValueStr)) {
<span class="hljs-comment">// 考虑多线程并发的情况,只有一个线程的设置值和当前值相同,它才有权利加锁</span>
<span class="hljs-keyword">return</span> <span class="hljs-literal">true</span>;
}
}
<span class="hljs-comment">// 其他情况,一律返回加锁失败</span>
<span class="hljs-keyword">return</span> <span class="hljs-literal">false</span>;
}
那么这段代码问题在哪里?1. 由于是客户端自己生成过期时间,所以需要强制要求分布式下每个客户端的时间必须同步。 2. 当锁过期的时候,如果多个客户端同时执行jedis.getSet()
方法,那么虽然最终只有一个客户端可以加锁,但是这个客户端的锁的过期时间可能被其他客户端覆盖。3. 锁不具备拥有者标识,即任何客户端都可以解锁。
解锁代码
正确姿势
还是先展示代码,再带大家慢慢解释为什么这样实现:
public class RedisTool {
<span class="hljs-keyword">private</span> <span class="hljs-keyword">static</span> final <span class="hljs-title class_">Long</span> <span class="hljs-variable constant_">RELEASE_SUCCESS</span> = 1L;
<span class="hljs-comment">/**
* 释放分布式锁
* <span class="hljs-doctag">@param</span> jedis Redis客户端
* <span class="hljs-doctag">@param</span> lockKey 锁
* <span class="hljs-doctag">@param</span> requestId 请求标识
* <span class="hljs-doctag">@return</span> 是否释放成功
*/</span>
<span class="hljs-keyword">public</span> <span class="hljs-keyword">static</span> <span class="hljs-built_in">boolean</span> <span class="hljs-title function_">releaseDistributedLock</span>(<span class="hljs-params">Jedis jedis, <span class="hljs-built_in">String</span> lockKey, <span class="hljs-built_in">String</span> requestId</span>) {
<span class="hljs-title class_">String</span> script = <span class="hljs-string">"if redis.call('get', KEYS[1]) == ARGV[1] then return redis.call('del', KEYS[1]) else return 0 end"</span>;
<span class="hljs-title class_">Object</span> result = jedis.<span class="hljs-built_in">eval</span>(script, <span class="hljs-title class_">Collections</span>.<span class="hljs-title function_">singletonList</span>(lockKey), <span class="hljs-title class_">Collections</span>.<span class="hljs-title function_">singletonList</span>(requestId));
<span class="hljs-keyword">if</span> (<span class="hljs-variable constant_">RELEASE_SUCCESS</span>.<span class="hljs-title function_">equals</span>(result)) {
<span class="hljs-keyword">return</span> <span class="hljs-literal">true</span>;
}
<span class="hljs-keyword">return</span> <span class="hljs-literal">false</span>;
}
}
可以看到,我们解锁只需要两行代码就搞定了!第一行代码,我们写了一个简单的 Lua 脚本代码,上一次见到这个编程语言还是在《黑客与画家》里,没想到这次居然用上了。第二行代码,我们将 Lua 代码传到jedis.eval()
方法里,并使参数 KEYS[1] 赋值为 lockKey,ARGV[1] 赋值为 requestId。eval() 方法是将 Lua 代码交给 Redis 服务端执行。
那么这段 Lua 代码的功能是什么呢?其实很简单,首先获取锁对应的 value 值,检查是否与 requestId 相等,如果相等则删除锁(解锁)。那么为什么要使用 Lua 语言来实现呢?因为要确保上述操作是原子性的。关于非原子性会带来什么问题,可以阅读【解锁代码 - 错误示例 2】 。那么为什么执行 eval() 方法可以确保原子性,源于 Redis 的特性,下面是官网对 eval 命令的部分解释:
简单来说,就是在 eval 命令执行 Lua 代码的时候,Lua 代码将被当成一个命令去执行,并且直到 eval 命令执行完成,Redis 才会执行其他命令。
错误示例 1
最常见的解锁代码就是直接使用jedis.del()
方法删除锁,这种不先判断锁的拥有者而直接解锁的方式,会导致任何客户端都可以随时进行解锁,即使这把锁不是它的。
public static void wrongReleaseLock1(Jedis jedis, String lockKey) {
jedis.del(lockKey);
}
错误示例 2
这种解锁代码乍一看也是没问题,甚至我之前也差点这样实现,与正确姿势差不多,唯一区别的是分成两条命令去执行,代码如下:
public static void wrongReleaseLock2(Jedis jedis, String lockKey, String requestId) {
<span class="hljs-comment">// 判断加锁与解锁是不是同一个客户端</span>
<span class="hljs-keyword">if</span> (requestId.<span class="hljs-title function_">equals</span>(jedis.<span class="hljs-title function_">get</span>(lockKey))) {
<span class="hljs-comment">// 若在此时,这把锁突然不是这个客户端的,则会误解锁</span>
jedis.<span class="hljs-title function_">del</span>(lockKey);
}
}
如代码注释,问题在于如果调用jedis.del()
方法的时候,这把锁已经不属于当前客户端的时候会解除他人加的锁。那么是否真的有这种场景?答案是肯定的,比如客户端 A 加锁,一段时间之后客户端 A 解锁,在执行jedis.del()
之前,锁突然过期了,此时客户端 B 尝试加锁成功,然后客户端 A 再执行 del() 方法,则将客户端 B 的锁给解除了。
总结
本文主要介绍了如何使用 Java 代码正确实现 Redis 分布式锁,对于加锁和解锁也分别给出了两个比较经典的错误示例。其实想要通过 Redis 实现分布式锁并不难,只要保证能满足可靠性里的四个条件。互联网虽然给我们带来了方便,只要有问题就可以 google,然而网上的答案一定是对的吗?其实不然,所以我们更应该时刻保持着质疑精神,多想多验证。
如果你的项目中 Redis 是多机部署的,那么可以尝试使用Redisson
实现分布式锁,这是 Redis 官方提供的 Java 组件,链接在参考阅读章节已经给出。