一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

Redis分布式鎖有什么特性

Linux愛好者 ? 來源:牛牛碼特 ? 作者:牛牛碼特 ? 2021-10-12 16:42 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

今天我們聊聊分布式鎖。

1. 分布式鎖是什么?

我們的手機有鎖、車有鎖、家門有鎖、貴重物品會鎖進保險箱??梢哉f,鎖在我們生活中無處不在,時刻保護著我們的人身財產安全。

在計算機領域也一樣,鎖可以理解為針對某項資源使用權限的管理,它通常用來控制共享資源,比如一個進程內有多個線程競爭一個數(shù)據的使用權限,解決方式之一就是加鎖。

那分布式鎖是什么呢?

顧名思義,分布式鎖就是分布式場景下的鎖,比如多臺不同機器上的進程,去競爭同一項資源,就是分布式鎖。

2. 分布式鎖有哪些特性?

具備哪些特性的分布式鎖才是一個優(yōu)秀的分布式鎖?我認為要從如下幾方面來看:

互斥性:鎖的目的是獲取資源的使用權,所以只讓一個競爭者持有鎖,這一點要盡可能保證;

安全性:避免死鎖情況發(fā)生。當一個競爭者在持有鎖期間內,由于意外崩潰而導致未能主動解鎖,其持有的鎖也能夠被正常釋放,并保證后續(xù)其它競爭者也能加鎖;

對稱性:同一個鎖,加鎖和解鎖必須是同一個競爭者。不能把其他競爭者持有的鎖給釋放了,這又稱為鎖的可重入性;

可靠性:需要有一定程度的異常處理能力、容災能力。

3. 分布式鎖的常用實現(xiàn)方式

分布式鎖,一般會依托第三方組件來實現(xiàn),而利用 Redis 實現(xiàn)則是工作中應用最多的一種。

今天,就讓我們從最基礎的步驟開始,依照分布式鎖的特性,層層遞進,步步完善,將它優(yōu)化到最優(yōu),讓大家完整地了解如何用 Redis 來實現(xiàn)一個分布式鎖。

3.1 最簡化版本

首先,當然是搭建一個最簡單的實現(xiàn)方式,直接用 Redis 的 setnx 命令,這個命令的語法是:

setnx key value

如果 key 不存在,則會將 key 設置為 value,并返回 1;如果 key 存在,不會有任務影響,返回 0。

基于這個特性,我們就可以用 setnx 實現(xiàn)加鎖的目的:通過 setnx 加鎖,加鎖之后其他服務無法加鎖,用完之后,再通過 delete 解鎖,深藏功與名。

3.2 支持過期時間

最簡化版本有一個問題:如果獲取鎖的服務掛掉了,那么鎖就一直得不到釋放,就像石沉大海,杳無音信。所以,我們需要一個超時來兜底。

Redis 中有 expire 命令,用來設置一個 key 的超時時間。但是 setnx 和 expire 不具備原子性,如果 setnx 獲取鎖之后,服務掛掉,依舊是泥牛入海。

很自然,我們會想到,set 和 expire,有沒有原子操作?

當然有,Redis早就考慮到了這種場景,推出了如下執(zhí)行語句:

set key value nx ex seconds

nx 表示具備 setnx 特定,ex 表示增加了過期時間,最后一個參數(shù)就是過期時間的值。

能夠支持過期時間,目前這個鎖基本上是能用了。

但是存在一個問題:會存在服務 A 釋放掉服務B的鎖的可能。

3.3 加上owner

我們來試想一下如下場景:服務 A 獲取了鎖,由于業(yè)務流程比較長,或者網絡延遲、 GC 卡頓等原因,導致鎖過期,而業(yè)務還會繼續(xù)進行。這時候,業(yè)務 B 已經拿到了鎖,準備去執(zhí)行,這個時候服務 A 恢復過來并做完了業(yè)務,就會釋放鎖,而 B 卻還在繼續(xù)執(zhí)行。

在真實的分布式場景中,可能存在幾十個競爭者,那么上述情況發(fā)生概率就很高,導致同一份資源頻繁被不同競爭者同時訪問,分布式鎖也就失去了意義。

基于這個場景,我們可以發(fā)現(xiàn),問題關鍵在于,競爭者可以釋放其他人的鎖。那么在異常情況下,就會出現(xiàn)問題,所以我們可以進一步給出解決方案:分布式鎖需要滿足誰申請誰釋放原則,不能釋放別人的鎖,也就是說,分布式鎖,是要有歸屬的。

3.4 引入 Lua

加入 owner 后的版本可以稱得上是完善了嗎?還有沒有什么隱患呢?

我也不賣關子了,到這一步其實還存在一個小問題,我們完整的流程是競爭者獲取鎖執(zhí)行任務,執(zhí)行完畢后檢查鎖是不是自己的,最后進行釋放。

流程一梳理,你們肯定明白了,執(zhí)行完畢后,檢查鎖,再釋放,這些操作不是原子化的。

可能鎖獲取時還是自己的,刪除時卻已經是別人的了。這可怎么辦呢?

Redis 可沒有直接提供這種場景原子化的操作啊。遇事不要慌,仔細想一想,Redis 是不是還有個特性,專門整合原子操作,對,就是它——Lua。

Redis+Lua,可以說是專門為解決原子問題而生。

有了 Lua 的特性,Redis 才真正在分布式鎖、秒殺等場景,有了用武之地,下面便是改造之后的流程:

其實到了這一步,分布式鎖的前三個特性:對稱性、安全性、可靠性,就滿足了??梢哉f是一個可用的分布式鎖了,能滿足大多數(shù)場景的需要。

4. 可靠性如何保證

分布式鎖的四大特性還剩下可靠性沒有解決。

針對一些異常場景,包括Redis掛掉了、業(yè)務執(zhí)行時間過長、網絡波動等情況,我們來一起分析如何處理。

4.1 容災考慮

前面我們談及的內容,基本是基于單機考慮的,如果 Redis 掛掉了,那鎖就不能獲取了。這個問題該如何解決呢?

一般來說,有兩種方法:主從容災和多級部署。

主從容災

最簡單的一種方式,就是為 Redis 配置從節(jié)點,當主節(jié)點掛了,用從節(jié)點頂包。

但是主從切換,需要人工參與,會提高人力成本。不過 Redis 已經有成熟的解決方案,也就是哨兵模式,可以靈活自動切換,不再需要人工介入。

通過增加從節(jié)點的方式,雖然一定程度解決了單點的容災問題,但并不是盡善盡美的,由于同步有時延,Slave 可能會損失掉部分數(shù)據,分布式鎖可能失效,這就會發(fā)生短暫的多機獲取到執(zhí)行權限。

有沒有更可靠的辦法呢?

多機部署

如果對一致性的要求高一些,可以嘗試多機部署,比如 Redis 的 RedLock,大概的思路就是多個機器,通常是奇數(shù)個,達到一半以上同意加鎖才算加鎖成功,這樣,可靠性會向 ETCD 靠近。

現(xiàn)在假設有 5 個 Redis 主節(jié)點,基本保證它們不會同時宕掉,獲取鎖和釋放鎖的過程中,客戶端會執(zhí)行以下操作:

向 5 個 Redis 申請加鎖;

只要超過一半,也就是 3 個 Redis 返回成功,那么就是獲取到了鎖。如果超過一半失敗,需要向每個 Redis 發(fā)送解鎖命令;

由于向 5 個 Redis 發(fā)送請求,會有一定時耗,所以鎖剩余持有時間,需要減去請求時間。這個可以作為判斷依據,如果剩余時間已經為 0,那么也是獲取鎖失敗;

使用完成之后,向 5 個 Redis 發(fā)送解鎖請求。

這種模式的好處在于,如果掛了 2 臺 Redis,整個集群還是可用的,給了運維更多時間來修復。

另外,多說一句,單點 Redis 的所有手段,這種多機模式都可以使用。比如為每個節(jié)點配置哨兵模式,由于加鎖是一半以上同意就成功,那么如果單個節(jié)點進行了主從切換,單個節(jié)點數(shù)據的丟失,就不會讓鎖失效了。這樣增強了可靠性。

4.2 可靠性深究

是不是有 RedLock,就一定能保證可靠的分布式鎖?

這里我先說結論:由于分布式系統(tǒng)中的三大困境(簡稱 NPC),所以沒有完全可靠的分布式鎖!

讓我們來看看 RedLock 在 NPC 下的表現(xiàn)。

N:Network Delay(網絡延遲)

當分布式鎖獲得返回包的時間過長,此時可能雖然加鎖成功,但是已經時過境遷,鎖可能很快過期。RedLock 算了做了些考量,也就是前面所說的鎖剩余持有時間,需要減去請求時間,如此一來,就可以一定程度解決網絡延遲的問題。

P:Process Pause(進程暫停)

比如發(fā)生 GC,獲取鎖之后 GC 了,處于 GC 執(zhí)行中,然后鎖超時。

其他鎖獲取,這種情況幾乎無解。這時候 GC 回來了,那么兩個進程就獲取到了同一個分布式鎖。

也許你會說,在 GC 回來之后,可以再去查一次啊?

這里有兩個問題,首先你怎么知道 GC 回來了?這個可以在做業(yè)務之前,通過時間,進行一個粗略判斷,但也是很吃場景經驗的;第二,如果你判斷的時候是 OK 的,但是判斷完 GC 了呢?這點 RedLoc k是無法解決的。

C:Clock Drift(時鐘漂移)

如果競爭者 A,獲得了 RedLock,在 5 臺分布式機器上都加上鎖。為了方便分析,我們直接假設 5 臺機器都發(fā)生了時鐘漂移,鎖瞬間過期了。這時候競爭者 B 拿到了鎖,此時 A 和 B 拿到了相同的執(zhí)行權限。

根據上述的分析,可以看出,RedLock 也不能扛住 NPC 的挑戰(zhàn)。因此,單單從分布式鎖本身出發(fā),完全可靠是不可能的。要實現(xiàn)一個相對可靠的分布式鎖機制,還是需要和業(yè)務的配合,業(yè)務本身要冪等可重入,這樣的設計可以省卻很多麻煩。

5. 復盤

我們圍繞互斥性、安全性、對稱性層層遞進,實現(xiàn)了一個 Redis 分布式鎖,這樣的架構在大多數(shù)業(yè)務場景都是完全夠用的。

同時,我們也針對可靠性,探討了主從容災、Red Lock 等解決方案,并分析了 NPC 異常場景,了解到分布式鎖在什么情況會失去作用,這些知識在實際的業(yè)務中都非常實用,能夠在實際開發(fā)中做出正確的決策。

建議對分布式鎖不要強依賴,沒有絕對可靠的分布式鎖,分布式鎖需要與業(yè)務的聯(lián)動配合更加切實可行,脫離了業(yè)務,就是空中樓閣,不著實地。

責任編輯:haq

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 分布式
    +關注

    關注

    1

    文章

    992

    瀏覽量

    75266
  • Redis
    +關注

    關注

    0

    文章

    385

    瀏覽量

    11378

原文標題:Redis分布式鎖,你用對了嗎?

文章出處:【微信號:LinuxHub,微信公眾號:Linux愛好者】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    雙電機分布式驅動汽車高速穩(wěn)定性機電耦合控制

    摘要:為了利用所設計的雙電機防滑差速驅動系統(tǒng)來提高分布式驅動汽車的動力學性能,在前期同軸耦合驅動控制理論研究的基礎上,開展該車的高速穩(wěn)定性機電耦合控制研究。建立并驗證包含所設計驅動系統(tǒng)在內的分布式
    發(fā)表于 06-18 16:37

    曙光存儲領跑中國分布式存儲市場

    近日,賽迪顧問發(fā)布《中國分布式存儲市場研究報告(2025)》,指出2024 年中國分布式存儲市場首次超過集中式存儲,規(guī)模達 198.2 億元,增速 43.7%。
    的頭像 發(fā)表于 05-19 16:50 ?406次閱讀

    分布式光伏如何實現(xiàn)防逆流?

    分布式光伏如何實現(xiàn)防逆流
    的頭像 發(fā)表于 03-24 13:31 ?241次閱讀
    <b class='flag-5'>分布式</b>光伏如何實現(xiàn)防逆流?

    分布式dtu和分散dtu說明介紹

    分布式dtu和分散dtu保護測控單元和綜合通訊單元組成,自愈采用基于通用面向對象變電站事件(GOOSE)的高速網絡通信方 ,利用配電網中相鄰開關的故障信息,快速定位故障位置并自動
    的頭像 發(fā)表于 03-19 22:25 ?1245次閱讀
    <b class='flag-5'>分布式</b>dtu和分散<b class='flag-5'>式</b>dtu說明介紹

    分布式存儲哪幾種類型?

    分布式存儲哪幾種類型?分布式存儲系統(tǒng)是一種將數(shù)據分散存儲在多臺獨立節(jié)點上的技術,根據數(shù)據模型可分為鍵值存儲、列式存儲、文檔存儲和圖形存儲等類型;按數(shù)據存儲單位可分為基于文件、塊和對象的存儲;按
    的頭像 發(fā)表于 02-20 11:00 ?520次閱讀

    分布式云化數(shù)據庫哪些類型

    分布式云化數(shù)據庫哪些類型?分布式云化數(shù)據庫主要類型包括:關系型分布式數(shù)據庫、非關系型分布式數(shù)據庫、新SQL
    的頭像 發(fā)表于 01-15 09:43 ?446次閱讀

    基于ptp的分布式系統(tǒng)設計

    在現(xiàn)代分布式系統(tǒng)中,精確的時間同步對于確保數(shù)據一致性、系統(tǒng)穩(wěn)定性和性能至關重要。PTP(Precision Time Protocol)是一種網絡協(xié)議,用于在分布式系統(tǒng)中實現(xiàn)高精度的時間同步
    的頭像 發(fā)表于 12-29 10:09 ?522次閱讀

    HarmonyOS Next 應用元服務開發(fā)-分布式數(shù)據對象遷移數(shù)據權限與基礎數(shù)據

    使用分布式數(shù)據對象遷移數(shù)據,當需要遷移的數(shù)據較大(100KB以上)或需要遷移文件時,可以使用分布式數(shù)據對象。原理與接口說明詳見分布式數(shù)據對象跨設備數(shù)據同步。 說明:自API 12起,由于直接使用跨
    發(fā)表于 12-24 09:40

    分布式通信的原理和實現(xiàn)高效分布式通信背后的技術NVLink的演進

    大型模型的大小已經超出了單個 GPU 的范圍。所以就需要實現(xiàn)跨多個 GPU 的模型訓練,這種訓練方式就涉及到了分布式通信和 NVLink。 當談及分布式通信和 NVLink 時,我們進入了一個引人入勝且不斷演進的技術領域,下面我們將簡單介紹
    的頭像 發(fā)表于 11-18 09:39 ?1202次閱讀
    <b class='flag-5'>分布式</b>通信的原理和實現(xiàn)高效<b class='flag-5'>分布式</b>通信背后的技術NVLink的演進

    分布式光纖測溫解決方案

    分布式光纖測溫解決方案
    的頭像 發(fā)表于 11-12 01:02 ?532次閱讀
    <b class='flag-5'>分布式</b>光纖測溫解決方案

    淺談屋頂分布式光伏發(fā)電技術的設計與應用

    【摘要】為了緩解城市用電緊張袁降低人們的用電成本,可以在工業(yè)園區(qū)、辦公樓屋頂?shù)葓鏊鶓梦蓓?b class='flag-5'>分布式光伏發(fā)電技術進行就近轉換、并網發(fā)電袁充分利用建筑物屋頂?shù)奶栙Y源。概述屋頂分布式光伏發(fā)電技術,分析屋頂
    的頭像 發(fā)表于 11-11 15:10 ?1782次閱讀
    淺談屋頂<b class='flag-5'>分布式</b>光伏發(fā)電技術的設計與應用

    分布式光纖測溫是什么?應用領域是?

    時,該處的散射光特性會受到影響。通過高速信號采集與數(shù)據處理技術,可以準確地定位發(fā)生溫度變化的位置,并給出實時的溫度信息。簡而言之,分布式光纖測溫技術將整條傳輸光纖作為傳感器,光纖上的每一點都兼具“傳”和“感”
    的頭像 發(fā)表于 10-24 15:30 ?1190次閱讀
    <b class='flag-5'>分布式</b>光纖測溫是什么?應用領域是?

    分布式光纖聲波傳感技術的工作原理

    分布式光纖聲波傳感技術(Distributed Acoustic Sensing,DAS)是一種利用光纖作為傳感元件,實現(xiàn)對沿光纖路徑上的環(huán)境參數(shù)進行連續(xù)分布式測量的技術。
    的頭像 發(fā)表于 10-18 14:50 ?2756次閱讀
    <b class='flag-5'>分布式</b>光纖聲波傳感技術的工作原理

    分布式輸電線路故障定位中的分布式是指什么

    所謂分布式指的是產品的部署方式,是相對于集中式而言的。 一、部署方式 分散安裝:分布式輸電線路故障定位系統(tǒng)中的采集裝置需要安裝在輸電線路的多個位置,通常是每隔一定距離設置一個監(jiān)測點,以確保對整條線路
    的頭像 發(fā)表于 10-16 11:39 ?660次閱讀
    <b class='flag-5'>分布式</b>輸電線路故障定位中的<b class='flag-5'>分布式</b>是指什么

    安科瑞分布式光伏系統(tǒng)在某重工企業(yè)18MW分布式光伏中應用

    ,江蘇省分布式光伏2228萬千瓦新增接入空間! 表:江蘇省分布式光伏接入能力規(guī)劃 根據國家能源局統(tǒng)計數(shù)據,截止2023年底,江蘇省分布式光伏接入總規(guī)模為2772萬千瓦,因此,2024
    的頭像 發(fā)表于 07-19 11:30 ?814次閱讀
    安科瑞<b class='flag-5'>分布式</b>光伏系統(tǒng)在某重工企業(yè)18MW<b class='flag-5'>分布式</b>光伏中應用