一、什么是分布式鎖?
要介紹分布式鎖,首先要提到與分布式鎖相對(duì)應(yīng)的是線程鎖、進(jìn)程鎖。
線程鎖:主要用來(lái)給方法、代碼塊加鎖。當(dāng)某個(gè)方法或代碼使用鎖,在同一時(shí)刻僅有一個(gè)線程執(zhí)行該方法或該代碼段。線程鎖只在同一JVM中有效果,因?yàn)榫€程鎖的實(shí)現(xiàn)在根本上是依靠線程之間共享內(nèi)存實(shí)現(xiàn)的,比如synchronized是共享對(duì)象頭,顯示鎖Lock是共享某個(gè)變量(state)。
進(jìn)程鎖:為了控制同一操作系統(tǒng)中多個(gè)進(jìn)程訪問(wèn)某個(gè)共享資源,因?yàn)檫M(jìn)程具有獨(dú)立性,各個(gè)進(jìn)程無(wú)法訪問(wèn)其他進(jìn)程的資源,因此無(wú)法通過(guò)synchronized等線程鎖實(shí)現(xiàn)進(jìn)程鎖。
分布式鎖:當(dāng)多個(gè)進(jìn)程不在同一個(gè)系統(tǒng)中,用分布式鎖控制多個(gè)進(jìn)程對(duì)資源的訪問(wèn)。
二、分布式鎖的使用場(chǎng)景。
線程間并發(fā)問(wèn)題和進(jìn)程間并發(fā)問(wèn)題都是可以通過(guò)分布式鎖解決的,但是強(qiáng)烈不建議這樣做!因?yàn)椴捎梅植际芥i解決這些小問(wèn)題是非常消耗資源的!分布式鎖應(yīng)該用來(lái)解決分布式情況下的多進(jìn)程并發(fā)問(wèn)題才是最合適的。
有這樣一個(gè)情境,線程A和線程B都共享某個(gè)變量X。
如果是單機(jī)情況下(單JVM),線程之間共享內(nèi)存,只要使用線程鎖就可以解決并發(fā)問(wèn)題。
如果是分布式情況下(多JVM),線程A和線程B很可能不是在同一JVM中,這樣線程鎖就無(wú)法起到作用了,這時(shí)候就要用到分布式鎖來(lái)解決。
三、分布式鎖的實(shí)現(xiàn)(Redis)
分布式鎖實(shí)現(xiàn)的關(guān)鍵是在分布式的應(yīng)用服務(wù)器外,搭建一個(gè)存儲(chǔ)服務(wù)器,存儲(chǔ)鎖信息,這時(shí)候我們很容易就想到了Redis。首先我們要搭建一個(gè)Redis服務(wù)器,用Redis服務(wù)器來(lái)存儲(chǔ)鎖信息。
在實(shí)現(xiàn)的時(shí)候要注意的幾個(gè)關(guān)鍵點(diǎn):
1、鎖信息必須是會(huì)過(guò)期超時(shí)的,不能讓一個(gè)線程長(zhǎng)期占有一個(gè)鎖而導(dǎo)致死鎖;
2、同一時(shí)刻只能有一個(gè)線程獲取到鎖。
幾個(gè)要用到的redis命令:
setnx(key, value):“set if not exits”,若該key-value不存在,則成功加入緩存并且返回1,否則返回0。
get(key):獲得key對(duì)應(yīng)的value值,若不存在則返回nil。
getset(key, value):先獲取key對(duì)應(yīng)的value值,若不存在則返回nil,然后將舊的value更新為新的value。
expire(key, seconds):設(shè)置key-value的有效期為seconds秒。
我采用Jedis作為Redis客戶端的api,下面來(lái)看一下具體實(shí)現(xiàn)的代碼。
(1)首先要?jiǎng)?chuàng)建一個(gè)Redis連接池。
public class RedisPool {private static JedisPool pool;//jedis連接池private static int maxTotal = 20;//最大連接數(shù) private static int maxIdle = 10;//最大空閑連接數(shù) private static int minIdle = 5;//最小空閑連接數(shù)private static boolean testOnBorrow = true;//在取連接時(shí)測(cè)試連接的可用性 private static boolean testOnReturn = false;//再還連接時(shí)不測(cè)試連接的可用性 static { initPool();//初始化連接池 } public static Jedis getJedis(){ return pool.getResource(); } public static void close(Jedis jedis){ jedis.close(); } private static void initPool(){ JedisPoolConfig config = new JedisPoolConfig(); config.setMaxTotal(maxTotal);config.setMaxIdle(maxIdle); config.setMinIdle(minIdle);config.setTestOnBorrow(testOnBorrow);config.setTestOnReturn(testOnReturn);config.setBlockWhenExhausted(true); pool = new JedisPool(config, “127.0.0.1”, 6379, 5000, “l(fā)iqiyao”); }}
(2)對(duì)Jedis的api進(jìn)行封裝,封裝一些實(shí)現(xiàn)分布式鎖需要用到的操作。
public class RedisPoolUtil {private RedisPoolUtil(){} private static RedisPool redisPool; public static String get(String key){ Jedis jedis = null; String result = null; try { jedis = RedisPool.getJedis(); result = jedis.get(key); } catch (Exception e){ e.printStackTrace(); } finally { if (jedis != null) { jedis.close(); } return result; } } public static Long setnx(String key, String value){ Jedis jedis = null; Long result = null; try { jedis = RedisPool.getJedis(); result = jedis.setnx(key, value); } catch (Exception e){ e.printStackTrace(); } finally { if (jedis != null) {jedis.close(); } return result; } } public static String getSet(String key, String value){ Jedis jedis = null; String result = null; try { jedis = RedisPool.getJedis(); result = jedis.getSet(key, value); } catch (Exception e){ e.printStackTrace(); } finally { if (jedis != null) {jedis.close(); } return result; } } public static Long expire(String key, int seconds){ Jedis jedis = null; Long result = null; try { jedis = RedisPool.getJedis(); result = jedis.expire(key, seconds); } catch (Exception e){ e.printStackTrace(); } finally { if (jedis != null) {jedis.close(); } return result; } } public static Long del(String key){ Jedis jedis = null; Long result = null; try { jedis = RedisPool.getJedis(); result = jedis.del(key); } catch (Exception e){ e.printStackTrace(); } finally { if (jedis != null) { jedis.close(); } return result; } }}
(3)分布式鎖工具類
public class DistributedLockUtil {private DistributedLockUtil(){ } public static boolean lock(String lockName){//lockName可以為共享變量名,也可以為方法名,主要是用于模擬鎖信息System.out.println(Thread.currentThread() + “開(kāi)始嘗試加鎖!”); Long result = RedisPoolUtil.setnx(lockName, String.valueOf(System.currentTimeMillis() + 5000)); if (result != null && result.intValue() == 1){ System.out.println(Thread.currentThread() + “加鎖成功!”); RedisPoolUtil.expire(lockName, 5);System.out.println(Thread.currentThread() + “執(zhí)行業(yè)務(wù)邏輯!”);RedisPoolUtil.del(lockName); return true; } else { String lockValueA = RedisPoolUtil.get(lockName); //判斷從pool.Resouce()里面取出的是否小于當(dāng)前時(shí)間 if (lockValueA != null && Long.parseLong(lockValueA) 《 System.currentTimeMillis()){ String lockValueB = RedisPoolUtil.getSet(lockName, String.valueOf(System.currentTimeMillis() + 5000)); if (lockValueB == null || lockValueB.equals(lockValueA)){System.out.println(Thread.currentThread() + “加鎖成功!”);RedisPoolUtil.expire(lockName, 5);System.out.println(Thread.currentThread() + “執(zhí)行業(yè)務(wù)邏輯!”);RedisPoolUtil.del(lockName); return true; } else { return false; } } else {return false; } } }}
前言
分布式鎖一般有三種實(shí)現(xiàn)方式:1. 數(shù)據(jù)庫(kù)樂(lè)觀鎖;2. 基于Redis的分布式鎖;3. 基于ZooKeeper的分布式鎖。本篇博客將介紹第二種方式,基于Redis實(shí)現(xiàn)分布式鎖。雖然網(wǎng)上已經(jīng)有各種介紹Redis分布式鎖實(shí)現(xiàn)的博客,然而他們的實(shí)現(xiàn)卻有著各種各樣的問(wèn)題,為了避免誤人子弟,本篇博客將詳細(xì)介紹如何正確地實(shí)現(xiàn)Redis分布式鎖。
可靠性
首先,為了確保分布式鎖可用,我們至少要確保鎖的實(shí)現(xiàn)同時(shí)滿足以下四個(gè)條件:
互斥性。在任意時(shí)刻,只有一個(gè)客戶端能持有鎖。
不會(huì)發(fā)生死鎖。即使有一個(gè)客戶端在持有鎖的期間崩潰而沒(méi)有主動(dòng)解鎖,也能保證后續(xù)其他客戶端能加鎖。
具有容錯(cuò)性。只要大部分的Redis節(jié)點(diǎn)正常運(yùn)行,客戶端就可以加鎖和解鎖。
解鈴還須系鈴人。加鎖和解鎖必須是同一個(gè)客戶端,客戶端自己不能把別人加的鎖給解了。
代碼實(shí)現(xiàn)
組件依賴
首先我們要通過(guò)Maven引入Jedis開(kāi)源組件,在pom.xml文件加入下面的代碼:
《dependency》《groupId》redis.clients《/groupId》《artifactId》jedis《/artifactId》 《version》2.9.0《/version》《/dependency》
加鎖代碼
正確姿勢(shì)
Talk is cheap, show me the code。先展示代碼,再帶大家慢慢解釋為什么這樣實(shí)現(xiàn):
public class RedisTool {private static final String LOCK_SUCCESS = “OK”; private static final String SET_IF_NOT_EXIST = “NX”; private static final String SET_WITH_EXPIRE_TIME = “PX”; /** * 嘗試獲取分布式鎖 * @param jedis Redis客戶端 * @param lockKey 鎖 * @param requestId 請(qǐng)求標(biāo)識(shí) * @param expireTime 超期時(shí)間 * @return 是否獲取成功 */ public static boolean tryGetDistributedLock(Jedis jedis, String lockKey, String requestId, int expireTime) { String result = jedis.set(lockKey, requestId, SET_IF_NOT_EXIST, SET_WITH_EXPIRE_TIME, expireTime); if (LOCK_SUCCESS.equals(result)) { return true; } return false; }}
可以看到,我們加鎖就一行代碼:jedis.set(String key, String value, String nxxx, String expx, int time),這個(gè)set()方法一共有五個(gè)形參:
第一個(gè)為key,我們使用key來(lái)當(dāng)鎖,因?yàn)閗ey是唯一的。
第二個(gè)為value,我們傳的是requestId,很多童鞋可能不明白,有key作為鎖不就夠了嗎,為什么還要用到value?原因就是我們?cè)谏厦嬷v到可靠性時(shí),分布式鎖要滿足第四個(gè)條件解鈴還須系鈴人,通過(guò)給value賦值為requestId,我們就知道這把鎖是哪個(gè)請(qǐng)求加的了,在解鎖的時(shí)候就可以有依據(jù)。requestId可以使用UUID.randomUUID().toString()方法生成。
第三個(gè)為nxxx,這個(gè)參數(shù)我們填的是NX,意思是SET IF NOT EXIST,即當(dāng)key不存在時(shí),我們進(jìn)行set操作;若key已經(jīng)存在,則不做任何操作;
第四個(gè)為expx,這個(gè)參數(shù)我們傳的是PX,意思是我們要給這個(gè)key加一個(gè)過(guò)期的設(shè)置,具體時(shí)間由第五個(gè)參數(shù)決定。
第五個(gè)為time,與第四個(gè)參數(shù)相呼應(yīng),代表key的過(guò)期時(shí)間。
總的來(lái)說(shuō),執(zhí)行上面的set()方法就只會(huì)導(dǎo)致兩種結(jié)果:1. 當(dāng)前沒(méi)有鎖(key不存在),那么就進(jìn)行加鎖操作,并對(duì)鎖設(shè)置個(gè)有效期,同時(shí)value表示加鎖的客戶端。2. 已有鎖存在,不做任何操作。
心細(xì)的童鞋就會(huì)發(fā)現(xiàn)了,我們的加鎖代碼滿足我們可靠性里描述的三個(gè)條件。首先,set()加入了NX參數(shù),可以保證如果已有key存在,則函數(shù)不會(huì)調(diào)用成功,也就是只有一個(gè)客戶端能持有鎖,滿足互斥性。其次,由于我們對(duì)鎖設(shè)置了過(guò)期時(shí)間,即使鎖的持有者后續(xù)發(fā)生崩潰而沒(méi)有解鎖,鎖也會(huì)因?yàn)榈搅诉^(guò)期時(shí)間而自動(dòng)解鎖(即key被刪除),不會(huì)發(fā)生死鎖。最后,因?yàn)槲覀儗alue賦值為requestId,代表加鎖的客戶端請(qǐng)求標(biāo)識(shí),那么在客戶端在解鎖的時(shí)候就可以進(jìn)行校驗(yàn)是否是同一個(gè)客戶端。由于我們只考慮Redis單機(jī)部署的場(chǎng)景,所以容錯(cuò)性我們暫不考慮。
錯(cuò)誤示例1
比較常見(jiàn)的錯(cuò)誤示例就是使用jedis.setnx()和jedis.expire()組合實(shí)現(xiàn)加鎖,代碼如下:
public static void wrongGetLock1(Jedis jedis, String lockKey, String requestId, int expireTime) {Long result = jedis.setnx(lockKey, requestId); if (result == 1) { // 若在這里程序突然崩潰,則無(wú)法設(shè)置過(guò)期時(shí)間,將發(fā)生死鎖 jedis.expire(lockKey, expireTime); }}
setnx()方法作用就是SET IF NOT EXIST,expire()方法就是給鎖加一個(gè)過(guò)期時(shí)間。乍一看好像和前面的set()方法結(jié)果一樣,然而由于這是兩條Redis命令,不具有原子性,如果程序在執(zhí)行完setnx()之后突然崩潰,導(dǎo)致鎖沒(méi)有設(shè)置過(guò)期時(shí)間。那么將會(huì)發(fā)生死鎖。網(wǎng)上之所以有人這樣實(shí)現(xiàn),是因?yàn)榈桶姹镜膉edis并不支持多參數(shù)的set()方法。
錯(cuò)誤示例2
這一種錯(cuò)誤示例就比較難以發(fā)現(xiàn)問(wèn)題,而且實(shí)現(xiàn)也比較復(fù)雜。實(shí)現(xiàn)思路:使用jedis.setnx()命令實(shí)現(xiàn)加鎖,其中key是鎖,value是鎖的過(guò)期時(shí)間。執(zhí)行過(guò)程:1. 通過(guò)setnx()方法嘗試加鎖,如果當(dāng)前鎖不存在,返回加鎖成功。2. 如果鎖已經(jīng)存在則獲取鎖的過(guò)期時(shí)間,和當(dāng)前時(shí)間比較,如果鎖已經(jīng)過(guò)期,則設(shè)置新的過(guò)期時(shí)間,返回加鎖成功。代碼如下:
public static boolean wrongGetLock2(Jedis jedis, String lockKey, int expireTime) {long expires = System.currentTimeMillis() + expireTime;String expiresStr = String.valueOf(expires); // 如果當(dāng)前鎖不存在,返回加鎖成功 if (jedis.setnx(lockKey, expiresStr) == 1) { return true; } // 如果鎖存在,獲取鎖的過(guò)期時(shí)間 String currentValueStr = jedis.get(lockKey);if (currentValueStr != null && Long.parseLong(currentValueStr) 《 System.currentTimeMillis()) { // 鎖已過(guò)期,獲取上一個(gè)鎖的過(guò)期時(shí)間,并設(shè)置現(xiàn)在鎖的過(guò)期時(shí)間 String oldValueStr = jedis.getSet(lockKey, expiresStr); if (oldValueStr != null && oldValueStr.equals(currentValueStr)) { // 考慮多線程并發(fā)的情況,只有一個(gè)線程的設(shè)置值和當(dāng)前值相同,它才有權(quán)利加鎖 return true; } } // 其他情況,一律返回加鎖失敗 return false;}
那么這段代碼問(wèn)題在哪里?1. 由于是客戶端自己生成過(guò)期時(shí)間,所以需要強(qiáng)制要求分布式下每個(gè)客戶端的時(shí)間必須同步。 2. 當(dāng)鎖過(guò)期的時(shí)候,如果多個(gè)客戶端同時(shí)執(zhí)行jedis.getSet()方法,那么雖然最終只有一個(gè)客戶端可以加鎖,但是這個(gè)客戶端的鎖的過(guò)期時(shí)間可能被其他客戶端覆蓋。3. 鎖不具備擁有者標(biāo)識(shí),即任何客戶端都可以解鎖。
解鎖代碼
正確姿勢(shì)
還是先展示代碼,再帶大家慢慢解釋為什么這樣實(shí)現(xiàn):
public class RedisTool {private static final Long RELEASE_SUCCESS = 1L; /** * 釋放分布式鎖 * @param jedis Redis客戶端 * @param lockKey 鎖 * @param requestId 請(qǐng)求標(biāo)識(shí) * @return 是否釋放成功 */public static boolean releaseDistributedLock(Jedis jedis, String lockKey, String requestId) { String script = “if redis.call(‘get’, KEYS[1]) == ARGV[1] then return redis.call(‘del’, KEYS[1]) else return 0 end”; Object result = jedis.eval(script, Collections.singletonList(lockKey), Collections.singletonList(requestId)); if (RELEASE_SUCCESS.equals(result)) { return true; } return false; }}
可以看到,我們解鎖只需要兩行代碼就搞定了!第一行代碼,我們寫(xiě)了一個(gè)簡(jiǎn)單的Lua腳本代碼,上一次見(jiàn)到這個(gè)編程語(yǔ)言還是在《黑客與畫(huà)家》里,沒(méi)想到這次居然用上了。第二行代碼,我們將Lua代碼傳到j(luò)edis.eval()方法里,并使參數(shù)KEYS[1]賦值為lockKey,ARGV[1]賦值為requestId。eval()方法是將Lua代碼交給Redis服務(wù)端執(zhí)行。
那么這段Lua代碼的功能是什么呢?其實(shí)很簡(jiǎn)單,首先獲取鎖對(duì)應(yīng)的value值,檢查是否與requestId相等,如果相等則刪除鎖(解鎖)。那么為什么要使用Lua語(yǔ)言來(lái)實(shí)現(xiàn)呢?因?yàn)橐_保上述操作是原子性的。關(guān)于非原子性會(huì)帶來(lái)什么問(wèn)題,可以閱讀【解鎖代碼-錯(cuò)誤示例2】 。那么為什么執(zhí)行eval()方法可以確保原子性,源于Redis的特性,下面是官網(wǎng)對(duì)eval命令的部分解釋:
簡(jiǎn)單來(lái)說(shuō),就是在eval命令執(zhí)行Lua代碼的時(shí)候,Lua代碼將被當(dāng)成一個(gè)命令去執(zhí)行,并且直到eval命令執(zhí)行完成,Redis才會(huì)執(zhí)行其他命令。
錯(cuò)誤示例1
最常見(jiàn)的解鎖代碼就是直接使用jedis.del()方法刪除鎖,這種不先判斷鎖的擁有者而直接解鎖的方式,會(huì)導(dǎo)致任何客戶端都可以隨時(shí)進(jìn)行解鎖,即使這把鎖不是它的。
public static void wrongReleaseLock1(Jedis jedis, String lockKey) {jedis.del(lockKey);}
錯(cuò)誤示例2
這種解鎖代碼乍一看也是沒(méi)問(wèn)題,甚至我之前也差點(diǎn)這樣實(shí)現(xiàn),與正確姿勢(shì)差不多,唯一區(qū)別的是分成兩條命令去執(zhí)行,代碼如下:
public static void wrongReleaseLock2(Jedis jedis, String lockKey, String requestId) {// 判斷加鎖與解鎖是不是同一個(gè)客戶端 if (requestId.equals(jedis.get(lockKey))) { // 若在此時(shí),這把鎖突然不是這個(gè)客戶端的,則會(huì)誤解鎖 jedis.del(lockKey); }}
如代碼注釋,問(wèn)題在于如果調(diào)用jedis.del()方法的時(shí)候,這把鎖已經(jīng)不屬于當(dāng)前客戶端的時(shí)候會(huì)解除他人加的鎖。那么是否真的有這種場(chǎng)景?答案是肯定的,比如客戶端A加鎖,一段時(shí)間之后客戶端A解鎖,在執(zhí)行jedis.del()之前,鎖突然過(guò)期了,此時(shí)客戶端B嘗試加鎖成功,然后客戶端A再執(zhí)行del()方法,則將客戶端B的鎖給解除了。
總結(jié)
本文主要介紹了如何使用Java代碼正確實(shí)現(xiàn)Redis分布式鎖,對(duì)于加鎖和解鎖也分別給出了兩個(gè)比較經(jīng)典的錯(cuò)誤示例。其實(shí)想要通過(guò)Redis實(shí)現(xiàn)分布式鎖并不難,只要保證能滿足可靠性里的四個(gè)條件?;ヂ?lián)網(wǎng)雖然給我們帶來(lái)了方便,只要有問(wèn)題就可以google,然而網(wǎng)上的答案一定是對(duì)的嗎?其實(shí)不然,所以我們更應(yīng)該時(shí)刻保持著質(zhì)疑精神,多想多驗(yàn)證。
如果你的項(xiàng)目中Redis是多機(jī)部署的,那么可以嘗試使用Redisson實(shí)現(xiàn)分布式鎖,這是Redis官方提供的Java組件。
-
JAVA
+關(guān)注
關(guān)注
19文章
2952瀏覽量
104487 -
分布式
+關(guān)注
關(guān)注
1文章
859瀏覽量
74439 -
Redis
+關(guān)注
關(guān)注
0文章
370瀏覽量
10830
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論