一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

Redis分布式鎖的正確使用方式探討

數(shù)據(jù)分析與開發(fā) ? 來源:撿田螺的小男孩 ? 作者:撿田螺的小男孩 ? 2021-03-30 10:53 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

前言

日常開發(fā)中,秒殺下單、搶紅包等等業(yè)務場景,都需要用到分布式鎖。而Redis非常適合作為分布式鎖使用。本文將分七個方案展開,跟大家探討Redis分布式鎖的正確使用方式。如果有不正確的地方,歡迎大家指出哈,一起學習一起進步。

什么是分布式鎖

方案一:SETNX + EXPIRE

方案二:SETNX + value值是(系統(tǒng)時間+過期時間)

方案三:使用Lua腳本(包含SETNX + EXPIRE兩條指令)

方案四:SET的擴展命令(SET EX PX NX)

方案五:SET EX PX NX + 校驗唯一隨機值,再釋放鎖

方案六: 開源框架~Redisson

方案七:多機實現(xiàn)的分布式鎖Redlock

什么是分布式鎖

分布式鎖其實就是,控制分布式系統(tǒng)不同進程共同訪問共享資源的一種鎖的實現(xiàn)。如果不同的系統(tǒng)或同一個系統(tǒng)的不同主機之間共享了某個臨界資源,往往需要互斥來防止彼此干擾,以保證一致性。

我們先來看下,一把靠譜的分布式鎖應該有哪些特征:

807b8ce6-8e33-11eb-8b86-12bb97331649.png

「互斥性」: 任意時刻,只有一個客戶端能持有鎖。

「鎖超時釋放」:持有鎖超時,可以釋放,防止不必要的資源浪費,也可以防止死鎖。

「可重入性」:一個線程如果獲取了鎖之后,可以再次對其請求加鎖。

「高性能和高可用」:加鎖和解鎖需要開銷盡可能低,同時也要保證高可用,避免分布式鎖失效。

「安全性」:鎖只能被持有的客戶端刪除,不能被其他客戶端刪除

Redis分布式鎖方案一:SETNX + EXPIRE

提到Redis的分布式鎖,很多小伙伴馬上就會想到setnx+ expire命令。即先用setnx來搶鎖,如果搶到之后,再用expire給鎖設置一個過期時間,防止鎖忘記了釋放。

SETNX 是SET IF NOT EXISTS的簡寫。日常命令格式是SETNX key value,如果 key不存在,則SETNX成功返回1,如果這個key已經存在了,則返回0。

假設某電商網(wǎng)站的某商品做秒殺活動,key可以設置為key_resource_id,value設置任意值,偽代碼如下:

if(jedis.setnx(key_resource_id,lock_value) == 1){ //加鎖

expire(key_resource_id,100); //設置過期時間

try {

do something //業(yè)務請求

}catch(){

}

finally {

jedis.del(key_resource_id); //釋放鎖

}

}

但是這個方案中,setnx和expire兩個命令分開了,「不是原子操作」。如果執(zhí)行完setnx加鎖,正要執(zhí)行expire設置過期時間時,進程crash或者要重啟維護了,那么這個鎖就“長生不老”了,「別的線程永遠獲取不到鎖啦」。

Redis分布式鎖方案二:SETNX + value值是(系統(tǒng)時間+過期時間)

為了解決方案一,「發(fā)生異常鎖得不到釋放的場景」,有小伙伴認為,可以把過期時間放到setnx的value值里面。如果加鎖失敗,再拿出value值校驗一下即可。加鎖代碼如下:

long expires = System.currentTimeMillis() + expireTime; //系統(tǒng)時間+設置的過期時間

String expiresStr = String.valueOf(expires);

// 如果當前鎖不存在,返回加鎖成功

if (jedis.setnx(key_resource_id, expiresStr) == 1) {

return true;

}

// 如果鎖已經存在,獲取鎖的過期時間

String currentValueStr = jedis.get(key_resource_id);

// 如果獲取到的過期時間,小于系統(tǒng)當前時間,表示已經過期

if (currentValueStr != null && Long.parseLong(currentValueStr) 《 System.currentTimeMillis()) {

// 鎖已過期,獲取上一個鎖的過期時間,并設置現(xiàn)在鎖的過期時間(不了解redis的getSet命令的小伙伴,可以去官網(wǎng)看下哈)

String oldValueStr = jedis.getSet(key_resource_id, expiresStr);

if (oldValueStr != null && oldValueStr.equals(currentValueStr)) {

// 考慮多線程并發(fā)的情況,只有一個線程的設置值和當前值相同,它才可以加鎖

return true;

}

}

//其他情況,均返回加鎖失敗

return false;

}

這個方案的優(yōu)點是,巧妙移除expire單獨設置過期時間的操作,把「過期時間放到setnx的value值」里面來。解決了方案一發(fā)生異常,鎖得不到釋放的問題。但是這個方案還有別的缺點:

過期時間是客戶端自己生成的(System.currentTimeMillis()是當前系統(tǒng)的時間),必須要求分布式環(huán)境下,每個客戶端的時間必須同步。

如果鎖過期的時候,并發(fā)多個客戶端同時請求過來,都執(zhí)行jedis.getSet(),最終只能有一個客戶端加鎖成功,但是該客戶端鎖的過期時間,可能被別的客戶端覆蓋

該鎖沒有保存持有者的唯一標識,可能被別的客戶端釋放/解鎖。

Redis分布式鎖方案三:使用Lua腳本(包含SETNX + EXPIRE兩條指令)

實際上,我們還可以使用Lua腳本來保證原子性(包含setnx和expire兩條指令),lua腳本如下:

if redis.call(‘setnx’,KEYS[1],ARGV[1]) == 1 then

redis.call(‘expire’,KEYS[1],ARGV[2])

else

return 0

end;

加鎖代碼如下:

String lua_scripts = “if redis.call(‘setnx’,KEYS[1],ARGV[1]) == 1 then” +

“ redis.call(‘expire’,KEYS[1],ARGV[2]) return 1 else return 0 end”;

Object result = jedis.eval(lua_scripts, Collections.singletonList(key_resource_id), Collections.singletonList(values));

//判斷是否成功

return result.equals(1L);

這個方案,跟方案二對比,你覺得哪個更好呢?

Redis分布式鎖方案方案四:SET的擴展命令(SET EX PX NX)

除了使用,使用Lua腳本,保證SETNX + EXPIRE兩條指令的原子性,我們還可以巧用Redis的SET指令擴展參數(shù)?。⊿ET key value[EX seconds][PX milliseconds][NX|XX]),它也是原子性的!

SET key value[EX seconds][PX milliseconds][NX|XX]

NX :表示key不存在的時候,才能set成功,也即保證只有第一個客戶端請求才能獲得鎖,而其他客戶端請求只能等其釋放鎖,才能獲取。

EX seconds :設定key的過期時間,時間單位是秒。

PX milliseconds: 設定key的過期時間,單位為毫秒

XX: 僅當key存在時設置值

偽代碼demo如下:

if(jedis.set(key_resource_id, lock_value, “NX”, “EX”, 100s) == 1){ //加鎖

try {

do something //業(yè)務處理

}catch(){

}

finally {

jedis.del(key_resource_id); //釋放鎖

}

}

但是呢,這個方案還是可能存在問題:

問題一:「鎖過期釋放了,業(yè)務還沒執(zhí)行完」。假設線程a獲取鎖成功,一直在執(zhí)行臨界區(qū)的代碼。但是100s過去后,它還沒執(zhí)行完。但是,這時候鎖已經過期了,此時線程b又請求過來。顯然線程b就可以獲得鎖成功,也開始執(zhí)行臨界區(qū)的代碼。那么問題就來了,臨界區(qū)的業(yè)務代碼都不是嚴格串行執(zhí)行的啦。

問題二:「鎖被別的線程誤刪」。假設線程a執(zhí)行完后,去釋放鎖。但是它不知道當前的鎖可能是線程b持有的(線程a去釋放鎖時,有可能過期時間已經到了,此時線程b進來占有了鎖)。那線程a就把線程b的鎖釋放掉了,但是線程b臨界區(qū)業(yè)務代碼可能都還沒執(zhí)行完呢。

方案五:SET EX PX NX + 校驗唯一隨機值,再刪除

既然鎖可能被別的線程誤刪,那我們給value值設置一個標記當前線程唯一的隨機數(shù),在刪除的時候,校驗一下,不就OK了嘛。偽代碼如下:

if(jedis.set(key_resource_id, uni_request_id, “NX”, “EX”, 100s) == 1){ //加鎖

try {

do something //業(yè)務處理

}catch(){

}

finally {

//判斷是不是當前線程加的鎖,是才釋放

if (uni_request_id.equals(jedis.get(key_resource_id))) {

jedis.del(lockKey); //釋放鎖

}

}

}

在這里,「判斷是不是當前線程加的鎖」和「釋放鎖」不是一個原子操作。如果調用jedis.del()釋放鎖的時候,可能這把鎖已經不屬于當前客戶端,會解除他人加的鎖。

80cf6082-8e33-11eb-8b86-12bb97331649.png

為了更嚴謹,一般也是用lua腳本代替。lua腳本如下:

if redis.call(‘get’,KEYS[1]) == ARGV[1] then

return redis.call(‘del’,KEYS[1])

else

return 0

end;

Redis分布式鎖方案六:Redisson框架

方案五還是可能存在「鎖過期釋放,業(yè)務沒執(zhí)行完」的問題。有些小伙伴認為,稍微把鎖過期時間設置長一些就可以啦。其實我們設想一下,是否可以給獲得鎖的線程,開啟一個定時守護線程,每隔一段時間檢查鎖是否還存在,存在則對鎖的過期時間延長,防止鎖過期提前釋放。

當前開源框架Redisson解決了這個問題。我們一起來看下Redisson底層原理圖吧:

8125db10-8e33-11eb-8b86-12bb97331649.png

只要線程一加鎖成功,就會啟動一個watch dog看門狗,它是一個后臺線程,會每隔10秒檢查一下,如果線程1還持有鎖,那么就會不斷的延長鎖key的生存時間。因此,Redisson就是使用Redisson解決了「鎖過期釋放,業(yè)務沒執(zhí)行完」問題。

Redis分布式鎖方案七:多機實現(xiàn)的分布式鎖Redlock+Redisson

前面六種方案都只是基于單機版的討論,還不是很完美。其實Redis一般都是集群部署的:

817c8eec-8e33-11eb-8b86-12bb97331649.png

如果線程一在Redis的master節(jié)點上拿到了鎖,但是加鎖的key還沒同步到slave節(jié)點。恰好這時,master節(jié)點發(fā)生故障,一個slave節(jié)點就會升級為master節(jié)點。線程二就可以獲取同個key的鎖啦,但線程一也已經拿到鎖了,鎖的安全性就沒了。

為了解決這個問題,Redis作者 antirez提出一種高級的分布式鎖算法:Redlock。Redlock核心思想是這樣的:

搞多個Redis master部署,以保證它們不會同時宕掉。并且這些master節(jié)點是完全相互獨立的,相互之間不存在數(shù)據(jù)同步。同時,需要確保在這多個master實例上,是與在Redis單實例,使用相同方法來獲取和釋放鎖。

我們假設當前有5個Redis master節(jié)點,在5臺服務器上面運行這些Redis實例。

824f17e0-8e33-11eb-8b86-12bb97331649.png

RedLock的實現(xiàn)步驟:如下

1.獲取當前時間,以毫秒為單位。

2.按順序向5個master節(jié)點請求加鎖??蛻舳嗽O置網(wǎng)絡連接和響應超時時間,并且超時時間要小于鎖的失效時間。(假設鎖自動失效時間為10秒,則超時時間一般在5-50毫秒之間,我們就假設超時時間是50ms吧)。如果超時,跳過該master節(jié)點,盡快去嘗試下一個master節(jié)點。

3.客戶端使用當前時間減去開始獲取鎖時間(即步驟1記錄的時間),得到獲取鎖使用的時間。當且僅當超過一半(N/2+1,這里是5/2+1=3個節(jié)點)的Redis master節(jié)點都獲得鎖,并且使用的時間小于鎖失效時間時,鎖才算獲取成功。(如上圖,10s》 30ms+40ms+50ms+4m0s+50ms)

如果取到了鎖,key的真正有效時間就變啦,需要減去獲取鎖所使用的時間。

如果獲取鎖失敗(沒有在至少N/2+1個master實例取到鎖,有或者獲取鎖時間已經超過了有效時間),客戶端要在所有的master節(jié)點上解鎖(即便有些master節(jié)點根本就沒有加鎖成功,也需要解鎖,以防止有些漏網(wǎng)之魚)。

簡化下步驟就是:

按順序向5個master節(jié)點請求加鎖

根據(jù)設置的超時時間來判斷,是不是要跳過該master節(jié)點。

如果大于等于3個節(jié)點加鎖成功,并且使用的時間小于鎖的有效期,即可認定加鎖成功啦。

如果獲取鎖失敗,解鎖!

Redisson實現(xiàn)了redLock版本的鎖,有興趣的小伙伴,可以去了解一下哈~

原文標題:七種方案!探討Redis分布式鎖的正確使用姿勢

文章出處:【微信公眾號:數(shù)據(jù)分析與開發(fā)】歡迎添加關注!文章轉載請注明出處。

責任編輯:haq

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 開源
    +關注

    關注

    3

    文章

    3642

    瀏覽量

    43657
  • 分布式
    +關注

    關注

    1

    文章

    992

    瀏覽量

    75266

原文標題:七種方案!探討Redis分布式鎖的正確使用姿勢

文章出處:【微信號:DBDevs,微信公眾號:數(shù)據(jù)分析與開發(fā)】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    曙光存儲領跑中國分布式存儲市場

    近日,賽迪顧問發(fā)布《中國分布式存儲市場研究報告(2025)》,指出2024 年中國分布式存儲市場首次超過集中式存儲,規(guī)模達 198.2 億元,增速 43.7%。
    的頭像 發(fā)表于 05-19 16:50 ?406次閱讀

    MCU分布式模塊化自動測量單元:數(shù)據(jù)傳輸與處理能力如何?

    在現(xiàn)代工程監(jiān)測中,MCU分布式模塊化自動測量單元(MCU)以其靈活的配置和強大的數(shù)據(jù)處理能力,成為了各類安全監(jiān)測項目的理想選擇。本文將深入探討MCU的工作原理、數(shù)據(jù)傳輸方式以及其在實際應用中的優(yōu)勢
    的頭像 發(fā)表于 03-12 14:09 ?368次閱讀
    MCU<b class='flag-5'>分布式</b>模塊化自動測量單元:數(shù)據(jù)傳輸與處理能力如何?

    分布式云化數(shù)據(jù)庫有哪些類型

    分布式云化數(shù)據(jù)庫有哪些類型?分布式云化數(shù)據(jù)庫主要類型包括:關系型分布式數(shù)據(jù)庫、非關系型分布式數(shù)據(jù)庫、新SQL分布式數(shù)據(jù)庫、以列
    的頭像 發(fā)表于 01-15 09:43 ?445次閱讀

    基于ptp的分布式系統(tǒng)設計

    在現(xiàn)代分布式系統(tǒng)中,精確的時間同步對于確保數(shù)據(jù)一致性、系統(tǒng)穩(wěn)定性和性能至關重要。PTP(Precision Time Protocol)是一種網(wǎng)絡協(xié)議,用于在分布式系統(tǒng)中實現(xiàn)高精度的時間同步
    的頭像 發(fā)表于 12-29 10:09 ?521次閱讀

    HarmonyOS Next 應用元服務開發(fā)-分布式數(shù)據(jù)對象遷移數(shù)據(jù)文件資產遷移

    設備文件訪問實現(xiàn)文件的遷移,難以獲取文件同步完成的時間。為了保證更高的成功率,文件的遷移不建議繼續(xù)通過該方式實現(xiàn),推薦使用分布式數(shù)據(jù)對象攜帶資產的方式。開發(fā)者此前通過跨設備文件訪問實現(xiàn)的文件遷移依然生效
    發(fā)表于 12-24 10:11

    HarmonyOS Next 應用元服務開發(fā)-分布式數(shù)據(jù)對象遷移數(shù)據(jù)權限與基礎數(shù)據(jù)

    設備文件訪問實現(xiàn)文件的遷移,難以獲取文件同步完成的時間。為了保證更高的成功率,文件的遷移不建議繼續(xù)通過該方式實現(xiàn),推薦使用分布式數(shù)據(jù)對象攜帶資產的方式。開發(fā)者此前通過跨設備文件訪問實現(xiàn)的文件遷移依然生效
    發(fā)表于 12-24 09:40

    分布式通信的原理和實現(xiàn)高效分布式通信背后的技術NVLink的演進

    大型模型的大小已經超出了單個 GPU 的范圍。所以就需要實現(xiàn)跨多個 GPU 的模型訓練,這種訓練方式就涉及到了分布式通信和 NVLink。 當談及分布式通信和 NVLink 時,我們進入了一個引人入勝且不斷演進的技術領域,下面我
    的頭像 發(fā)表于 11-18 09:39 ?1201次閱讀
    <b class='flag-5'>分布式</b>通信的原理和實現(xiàn)高效<b class='flag-5'>分布式</b>通信背后的技術NVLink的演進

    分布式光纖測溫解決方案

    分布式光纖測溫解決方案
    的頭像 發(fā)表于 11-12 01:02 ?531次閱讀
    <b class='flag-5'>分布式</b>光纖測溫解決方案

    淺談屋頂分布式光伏發(fā)電技術的設計與應用

    分布式光伏發(fā)電系統(tǒng)組成,探討屋頂分布式光伏發(fā)電技術的應用優(yōu)勢和應用方式,并以某項目為例研究屋頂分布式光伏發(fā)電技術的實際應用,以期為屋頂光伏發(fā)
    的頭像 發(fā)表于 11-11 15:10 ?1782次閱讀
    淺談屋頂<b class='flag-5'>分布式</b>光伏發(fā)電技術的設計與應用

    分布式光纖測溫是什么?應用領域是?

    分布式光纖測溫是一種先進的溫度測量技術,它利用光纖的拉曼散射原理進行溫度監(jiān)測。以下是對分布式光纖測溫的詳細介紹: 一、基本原理 分布式光纖測溫的原理基于光纖的拉曼散射效應。當光纖某處的溫度發(fā)生變化
    的頭像 發(fā)表于 10-24 15:30 ?1183次閱讀
    <b class='flag-5'>分布式</b>光纖測溫是什么?應用領域是?

    分布式光纖聲波傳感技術的工作原理

    分布式光纖聲波傳感技術(Distributed Acoustic Sensing,DAS)是一種利用光纖作為傳感元件,實現(xiàn)對沿光纖路徑上的環(huán)境參數(shù)進行連續(xù)分布式測量的技術。
    的頭像 發(fā)表于 10-18 14:50 ?2749次閱讀
    <b class='flag-5'>分布式</b>光纖聲波傳感技術的工作原理

    分布式輸電線路故障定位中的分布式是指什么

    所謂分布式指的是產品的部署方式,是相對于集中式而言的。 一、部署方式 分散安裝:分布式輸電線路故障定位系統(tǒng)中的采集裝置需要安裝在輸電線路的多個位置,通常是每隔一定距離設置一個監(jiān)測點,以
    的頭像 發(fā)表于 10-16 11:39 ?659次閱讀
    <b class='flag-5'>分布式</b>輸電線路故障定位中的<b class='flag-5'>分布式</b>是指什么

    安科瑞分布式光伏監(jiān)控系統(tǒng)在鄂爾多斯5MW分布式光伏煤礦項目中的應用

    分布式光伏發(fā)電就是將太陽能光伏板分散布置在各個區(qū)域,通過小規(guī)模、模塊化的方式實現(xiàn)電能的并網(wǎng)或獨立使用,這種發(fā)電方式具有就近發(fā)電、就近并網(wǎng)、就近轉換、就近使用的特點。近年來,技術進步和政策支持推動了光
    發(fā)表于 09-25 14:53 ?0次下載

    安科瑞分布式光伏監(jiān)控系統(tǒng)在鄂托克旗巴音烏蘇六保煤礦5MW分布式光伏項目中的應用

    摘 要: 分布式光伏發(fā)電就是將太陽能光伏板分散布置在各個區(qū)域,通過小規(guī)模、模塊化的方式實現(xiàn)電能的并網(wǎng)或獨立使用,這種發(fā)電方式具有就近發(fā)電、就近并網(wǎng)、就近轉換、就近使用的特點。近年來,技術進步和政策
    的頭像 發(fā)表于 09-24 16:47 ?569次閱讀
    安科瑞<b class='flag-5'>分布式</b>光伏監(jiān)控系統(tǒng)在鄂托克旗巴音烏蘇六保煤礦5MW<b class='flag-5'>分布式</b>光伏項目中的應用

    分布式故障診斷裝置

    在電力系統(tǒng)的運營中,各電壓等級輸電線路的故障點正確、快速診斷一直是一個關鍵問題。隨著科技的進步,分布式故障定位裝置的出現(xiàn)為這一問題帶來了創(chuàng)新的解決方案。今天,就讓我們來聊聊這一設備是如何發(fā)展起來
    的頭像 發(fā)表于 08-19 18:31 ?896次閱讀
    <b class='flag-5'>分布式</b>故障診斷裝置