0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Redis分布式鎖的正確使用方式探討

數(shù)據(jù)分析與開發(fā) ? 來源:撿田螺的小男孩 ? 作者:撿田螺的小男孩 ? 2021-03-30 10:53 ? 次閱讀

前言

日常開發(fā)中,秒殺下單、搶紅包等等業(yè)務(wù)場景,都需要用到分布式鎖。而Redis非常適合作為分布式鎖使用。本文將分七個方案展開,跟大家探討Redis分布式鎖的正確使用方式。如果有不正確的地方,歡迎大家指出哈,一起學(xué)習(xí)一起進(jìn)步。

什么是分布式鎖

方案一:SETNX + EXPIRE

方案二:SETNX + value值是(系統(tǒng)時間+過期時間)

方案三:使用Lua腳本(包含SETNX + EXPIRE兩條指令)

方案四:SET的擴(kuò)展命令(SET EX PX NX)

方案五:SET EX PX NX + 校驗唯一隨機(jī)值,再釋放鎖

方案六: 開源框架~Redisson

方案七:多機(jī)實現(xiàn)的分布式鎖Redlock

什么是分布式鎖

分布式鎖其實就是,控制分布式系統(tǒng)不同進(jìn)程共同訪問共享資源的一種鎖的實現(xiàn)。如果不同的系統(tǒng)或同一個系統(tǒng)的不同主機(jī)之間共享了某個臨界資源,往往需要互斥來防止彼此干擾,以保證一致性。

我們先來看下,一把靠譜的分布式鎖應(yīng)該有哪些特征:

807b8ce6-8e33-11eb-8b86-12bb97331649.png

「互斥性」: 任意時刻,只有一個客戶端能持有鎖。

「鎖超時釋放」:持有鎖超時,可以釋放,防止不必要的資源浪費,也可以防止死鎖。

「可重入性」:一個線程如果獲取了鎖之后,可以再次對其請求加鎖。

「高性能和高可用」:加鎖和解鎖需要開銷盡可能低,同時也要保證高可用,避免分布式鎖失效。

「安全性」:鎖只能被持有的客戶端刪除,不能被其他客戶端刪除

Redis分布式鎖方案一:SETNX + EXPIRE

提到Redis的分布式鎖,很多小伙伴馬上就會想到setnx+ expire命令。即先用setnx來搶鎖,如果搶到之后,再用expire給鎖設(shè)置一個過期時間,防止鎖忘記了釋放。

SETNX 是SET IF NOT EXISTS的簡寫。日常命令格式是SETNX key value,如果 key不存在,則SETNX成功返回1,如果這個key已經(jīng)存在了,則返回0。

假設(shè)某電商網(wǎng)站的某商品做秒殺活動,key可以設(shè)置為key_resource_id,value設(shè)置任意值,偽代碼如下:

if(jedis.setnx(key_resource_id,lock_value) == 1){ //加鎖

expire(key_resource_id,100); //設(shè)置過期時間

try {

do something //業(yè)務(wù)請求

}catch(){

}

finally {

jedis.del(key_resource_id); //釋放鎖

}

}

但是這個方案中,setnx和expire兩個命令分開了,「不是原子操作」。如果執(zhí)行完setnx加鎖,正要執(zhí)行expire設(shè)置過期時間時,進(jìn)程crash或者要重啟維護(hù)了,那么這個鎖就“長生不老”了,「別的線程永遠(yuǎn)獲取不到鎖啦」。

Redis分布式鎖方案二:SETNX + value值是(系統(tǒng)時間+過期時間)

為了解決方案一,「發(fā)生異常鎖得不到釋放的場景」,有小伙伴認(rèn)為,可以把過期時間放到setnx的value值里面。如果加鎖失敗,再拿出value值校驗一下即可。加鎖代碼如下:

long expires = System.currentTimeMillis() + expireTime; //系統(tǒng)時間+設(shè)置的過期時間

String expiresStr = String.valueOf(expires);

// 如果當(dāng)前鎖不存在,返回加鎖成功

if (jedis.setnx(key_resource_id, expiresStr) == 1) {

return true;

}

// 如果鎖已經(jīng)存在,獲取鎖的過期時間

String currentValueStr = jedis.get(key_resource_id);

// 如果獲取到的過期時間,小于系統(tǒng)當(dāng)前時間,表示已經(jīng)過期

if (currentValueStr != null && Long.parseLong(currentValueStr) 《 System.currentTimeMillis()) {

// 鎖已過期,獲取上一個鎖的過期時間,并設(shè)置現(xiàn)在鎖的過期時間(不了解redis的getSet命令的小伙伴,可以去官網(wǎng)看下哈)

String oldValueStr = jedis.getSet(key_resource_id, expiresStr);

if (oldValueStr != null && oldValueStr.equals(currentValueStr)) {

// 考慮多線程并發(fā)的情況,只有一個線程的設(shè)置值和當(dāng)前值相同,它才可以加鎖

return true;

}

}

//其他情況,均返回加鎖失敗

return false;

}

這個方案的優(yōu)點是,巧妙移除expire單獨設(shè)置過期時間的操作,把「過期時間放到setnx的value值」里面來。解決了方案一發(fā)生異常,鎖得不到釋放的問題。但是這個方案還有別的缺點:

過期時間是客戶端自己生成的(System.currentTimeMillis()是當(dāng)前系統(tǒng)的時間),必須要求分布式環(huán)境下,每個客戶端的時間必須同步。

如果鎖過期的時候,并發(fā)多個客戶端同時請求過來,都執(zhí)行jedis.getSet(),最終只能有一個客戶端加鎖成功,但是該客戶端鎖的過期時間,可能被別的客戶端覆蓋

該鎖沒有保存持有者的唯一標(biāo)識,可能被別的客戶端釋放/解鎖。

Redis分布式鎖方案三:使用Lua腳本(包含SETNX + EXPIRE兩條指令)

實際上,我們還可以使用Lua腳本來保證原子性(包含setnx和expire兩條指令),lua腳本如下:

if redis.call(‘setnx’,KEYS[1],ARGV[1]) == 1 then

redis.call(‘expire’,KEYS[1],ARGV[2])

else

return 0

end;

加鎖代碼如下:

String lua_scripts = “if redis.call(‘setnx’,KEYS[1],ARGV[1]) == 1 then” +

“ redis.call(‘expire’,KEYS[1],ARGV[2]) return 1 else return 0 end”;

Object result = jedis.eval(lua_scripts, Collections.singletonList(key_resource_id), Collections.singletonList(values));

//判斷是否成功

return result.equals(1L);

這個方案,跟方案二對比,你覺得哪個更好呢?

Redis分布式鎖方案方案四:SET的擴(kuò)展命令(SET EX PX NX)

除了使用,使用Lua腳本,保證SETNX + EXPIRE兩條指令的原子性,我們還可以巧用Redis的SET指令擴(kuò)展參數(shù)?。⊿ET key value[EX seconds][PX milliseconds][NX|XX]),它也是原子性的!

SET key value[EX seconds][PX milliseconds][NX|XX]

NX :表示key不存在的時候,才能set成功,也即保證只有第一個客戶端請求才能獲得鎖,而其他客戶端請求只能等其釋放鎖,才能獲取。

EX seconds :設(shè)定key的過期時間,時間單位是秒。

PX milliseconds: 設(shè)定key的過期時間,單位為毫秒

XX: 僅當(dāng)key存在時設(shè)置值

偽代碼demo如下:

if(jedis.set(key_resource_id, lock_value, “NX”, “EX”, 100s) == 1){ //加鎖

try {

do something //業(yè)務(wù)處理

}catch(){

}

finally {

jedis.del(key_resource_id); //釋放鎖

}

}

但是呢,這個方案還是可能存在問題:

問題一:「鎖過期釋放了,業(yè)務(wù)還沒執(zhí)行完」。假設(shè)線程a獲取鎖成功,一直在執(zhí)行臨界區(qū)的代碼。但是100s過去后,它還沒執(zhí)行完。但是,這時候鎖已經(jīng)過期了,此時線程b又請求過來。顯然線程b就可以獲得鎖成功,也開始執(zhí)行臨界區(qū)的代碼。那么問題就來了,臨界區(qū)的業(yè)務(wù)代碼都不是嚴(yán)格串行執(zhí)行的啦。

問題二:「鎖被別的線程誤刪」。假設(shè)線程a執(zhí)行完后,去釋放鎖。但是它不知道當(dāng)前的鎖可能是線程b持有的(線程a去釋放鎖時,有可能過期時間已經(jīng)到了,此時線程b進(jìn)來占有了鎖)。那線程a就把線程b的鎖釋放掉了,但是線程b臨界區(qū)業(yè)務(wù)代碼可能都還沒執(zhí)行完呢。

方案五:SET EX PX NX + 校驗唯一隨機(jī)值,再刪除

既然鎖可能被別的線程誤刪,那我們給value值設(shè)置一個標(biāo)記當(dāng)前線程唯一的隨機(jī)數(shù),在刪除的時候,校驗一下,不就OK了嘛。偽代碼如下:

if(jedis.set(key_resource_id, uni_request_id, “NX”, “EX”, 100s) == 1){ //加鎖

try {

do something //業(yè)務(wù)處理

}catch(){

}

finally {

//判斷是不是當(dāng)前線程加的鎖,是才釋放

if (uni_request_id.equals(jedis.get(key_resource_id))) {

jedis.del(lockKey); //釋放鎖

}

}

}

在這里,「判斷是不是當(dāng)前線程加的鎖」和「釋放鎖」不是一個原子操作。如果調(diào)用jedis.del()釋放鎖的時候,可能這把鎖已經(jīng)不屬于當(dāng)前客戶端,會解除他人加的鎖。

80cf6082-8e33-11eb-8b86-12bb97331649.png

為了更嚴(yán)謹(jǐn),一般也是用lua腳本代替。lua腳本如下:

if redis.call(‘get’,KEYS[1]) == ARGV[1] then

return redis.call(‘del’,KEYS[1])

else

return 0

end;

Redis分布式鎖方案六:Redisson框架

方案五還是可能存在「鎖過期釋放,業(yè)務(wù)沒執(zhí)行完」的問題。有些小伙伴認(rèn)為,稍微把鎖過期時間設(shè)置長一些就可以啦。其實我們設(shè)想一下,是否可以給獲得鎖的線程,開啟一個定時守護(hù)線程,每隔一段時間檢查鎖是否還存在,存在則對鎖的過期時間延長,防止鎖過期提前釋放。

當(dāng)前開源框架Redisson解決了這個問題。我們一起來看下Redisson底層原理圖吧:

8125db10-8e33-11eb-8b86-12bb97331649.png

只要線程一加鎖成功,就會啟動一個watch dog看門狗,它是一個后臺線程,會每隔10秒檢查一下,如果線程1還持有鎖,那么就會不斷的延長鎖key的生存時間。因此,Redisson就是使用Redisson解決了「鎖過期釋放,業(yè)務(wù)沒執(zhí)行完」問題。

Redis分布式鎖方案七:多機(jī)實現(xiàn)的分布式鎖Redlock+Redisson

前面六種方案都只是基于單機(jī)版的討論,還不是很完美。其實Redis一般都是集群部署的:

817c8eec-8e33-11eb-8b86-12bb97331649.png

如果線程一在Redis的master節(jié)點上拿到了鎖,但是加鎖的key還沒同步到slave節(jié)點。恰好這時,master節(jié)點發(fā)生故障,一個slave節(jié)點就會升級為master節(jié)點。線程二就可以獲取同個key的鎖啦,但線程一也已經(jīng)拿到鎖了,鎖的安全性就沒了。

為了解決這個問題,Redis作者 antirez提出一種高級的分布式鎖算法:Redlock。Redlock核心思想是這樣的:

搞多個Redis master部署,以保證它們不會同時宕掉。并且這些master節(jié)點是完全相互獨立的,相互之間不存在數(shù)據(jù)同步。同時,需要確保在這多個master實例上,是與在Redis單實例,使用相同方法來獲取和釋放鎖。

我們假設(shè)當(dāng)前有5個Redis master節(jié)點,在5臺服務(wù)器上面運(yùn)行這些Redis實例。

824f17e0-8e33-11eb-8b86-12bb97331649.png

RedLock的實現(xiàn)步驟:如下

1.獲取當(dāng)前時間,以毫秒為單位。

2.按順序向5個master節(jié)點請求加鎖??蛻舳嗽O(shè)置網(wǎng)絡(luò)連接和響應(yīng)超時時間,并且超時時間要小于鎖的失效時間。(假設(shè)鎖自動失效時間為10秒,則超時時間一般在5-50毫秒之間,我們就假設(shè)超時時間是50ms吧)。如果超時,跳過該master節(jié)點,盡快去嘗試下一個master節(jié)點。

3.客戶端使用當(dāng)前時間減去開始獲取鎖時間(即步驟1記錄的時間),得到獲取鎖使用的時間。當(dāng)且僅當(dāng)超過一半(N/2+1,這里是5/2+1=3個節(jié)點)的Redis master節(jié)點都獲得鎖,并且使用的時間小于鎖失效時間時,鎖才算獲取成功。(如上圖,10s》 30ms+40ms+50ms+4m0s+50ms)

如果取到了鎖,key的真正有效時間就變啦,需要減去獲取鎖所使用的時間。

如果獲取鎖失?。]有在至少N/2+1個master實例取到鎖,有或者獲取鎖時間已經(jīng)超過了有效時間),客戶端要在所有的master節(jié)點上解鎖(即便有些master節(jié)點根本就沒有加鎖成功,也需要解鎖,以防止有些漏網(wǎng)之魚)。

簡化下步驟就是:

按順序向5個master節(jié)點請求加鎖

根據(jù)設(shè)置的超時時間來判斷,是不是要跳過該master節(jié)點。

如果大于等于3個節(jié)點加鎖成功,并且使用的時間小于鎖的有效期,即可認(rèn)定加鎖成功啦。

如果獲取鎖失敗,解鎖!

Redisson實現(xiàn)了redLock版本的鎖,有興趣的小伙伴,可以去了解一下哈~

原文標(biāo)題:七種方案!探討Redis分布式鎖的正確使用姿勢

文章出處:【微信公眾號:數(shù)據(jù)分析與開發(fā)】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

責(zé)任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 開源
    +關(guān)注

    關(guān)注

    3

    文章

    3215

    瀏覽量

    42327
  • 分布式
    +關(guān)注

    關(guān)注

    1

    文章

    858

    瀏覽量

    74439

原文標(biāo)題:七種方案!探討Redis分布式鎖的正確使用姿勢

文章出處:【微信號:DBDevs,微信公眾號:數(shù)據(jù)分析與開發(fā)】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    Redis實現(xiàn)分布式多規(guī)則限流的方式介紹

    市面上很多介紹 Redis 如何實現(xiàn)限流的,但是大部分都有一個缺點,就是只能實現(xiàn)單一的限流,比如 1 分鐘訪問 1 次或者 60 分鐘訪問 10 次這種,但是如果想一個接口兩種規(guī)則都需要滿足呢,我們的項目又是分布式項目,應(yīng)該如何解決,下面就介紹一下
    的頭像 發(fā)表于 02-26 10:07 ?432次閱讀
    <b class='flag-5'>Redis</b>實現(xiàn)<b class='flag-5'>分布式</b>多規(guī)則限流的<b class='flag-5'>方式</b>介紹

    分布式的三種實現(xiàn)方式

    分布式的三種實現(xiàn)方式? 分布式是在分布式系統(tǒng)中用于實現(xiàn)對共享資源進(jìn)行訪問控制的一種機(jī)制。
    的頭像 發(fā)表于 12-28 10:01 ?836次閱讀

    redis分布式的缺點

    Redis分布式是一種常見的用于解決分布式系統(tǒng)中資源爭用問題的解決方案。盡管Redis分布式
    的頭像 發(fā)表于 12-04 14:05 ?1169次閱讀

    淺析Redis 分布式解決方案

    Redis 分布式解決方案是一種基于Redis實現(xiàn)的分布式機(jī)制,可以確保在
    的頭像 發(fā)表于 12-04 14:00 ?452次閱讀

    redis超時了怎么處理

    在構(gòu)建高并發(fā)系統(tǒng)或分布式系統(tǒng)時,使用Redis作為分布式是一種常見的解決方案。然而,由于網(wǎng)絡(luò)延遲、系統(tǒng)故障或其他原因,鎖定的資源可能因為超時而導(dǎo)致問題。本文將詳細(xì)介紹如何處理
    的頭像 發(fā)表于 12-04 13:53 ?1107次閱讀

    redisincres防止重復(fù)提交

    Redis是一個開源的內(nèi)存數(shù)據(jù)存儲系統(tǒng),常用于緩存、消息隊列和分布式等場景。在分布式系統(tǒng)中,經(jīng)常會出現(xiàn)多個客戶端同時對同一資源進(jìn)行操作的情況,此時需要一種機(jī)制來保證資源的一致性和數(shù)據(jù)
    的頭像 發(fā)表于 12-04 13:50 ?770次閱讀

    redis分布式可能出現(xiàn)的問題及解決方案

    Redis分布式是一種常見的解決分布式系統(tǒng)中并發(fā)問題的方案。雖然Redis分布式鎖具有許多優(yōu)點
    的頭像 發(fā)表于 12-04 11:29 ?890次閱讀

    如何實現(xiàn)Redis分布式

    Redis是一個開源的內(nèi)存數(shù)據(jù)存儲系統(tǒng),可用于高速讀寫操作。在分布式系統(tǒng)中,為了保證數(shù)據(jù)的一致性和避免競態(tài)條件,常常需要使用分布式來對共享資源進(jìn)行加鎖操作。
    的頭像 發(fā)表于 12-04 11:24 ?634次閱讀

    redis分布式三個方法

    Redis是一種高性能的分布式緩存和鍵值存儲系統(tǒng),它提供了一種可靠的分布式解決方案。在分布式系統(tǒng)中,由于多個節(jié)點之間的并發(fā)訪問,需要使用
    的頭像 發(fā)表于 12-04 11:22 ?1378次閱讀

    redis分布式的應(yīng)用場景有哪些

    Redis分布式是一種基于Redis實現(xiàn)的分布式機(jī)制,可以在
    的頭像 發(fā)表于 12-04 11:21 ?1356次閱讀

    java redis處理并發(fā)代碼

    問題。 本文將詳細(xì)介紹如何在Java代碼中使用Redis實現(xiàn)并發(fā)代碼的處理。我們將分為以下幾個方面來討論: Redis分布式的原理
    的頭像 發(fā)表于 12-04 11:04 ?904次閱讀

    redis分布式死鎖處理方案

    引言: 隨著分布式系統(tǒng)的廣泛應(yīng)用,尤其是在大規(guī)模并發(fā)操作下,對并發(fā)控制的需求越來越高。Redis分布式作為一種常見的分布式
    的頭像 發(fā)表于 11-16 11:44 ?1664次閱讀

    redis分布式可能出現(xiàn)的問題

    Redis分布式是一種常用的機(jī)制,用于解決多個進(jìn)程或多臺服務(wù)器對共享資源的并發(fā)訪問問題。然而,由于分布式環(huán)境的復(fù)雜性,使用
    的頭像 發(fā)表于 11-16 11:40 ?1332次閱讀

    redis分布式如何實現(xiàn)等待

    Redis是一種高性能的鍵值存儲系統(tǒng),它除了提供基本的數(shù)據(jù)緩存功能外,還支持一些復(fù)雜的數(shù)據(jù)結(jié)構(gòu)和功能,例如發(fā)布訂閱、事務(wù)、持久化等。其中,Redis分布式是其常用的功能之一,可以用
    的頭像 發(fā)表于 11-16 11:31 ?1124次閱讀

    redis分布式如何實現(xiàn)

    的情況,分布式的作用就是確保在同一時間只有一個客戶端可以訪問共享資源,從而保證數(shù)據(jù)的一致性和正確性。 下面將詳細(xì)介紹Redis分布式
    的頭像 發(fā)表于 11-16 11:29 ?487次閱讀