在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

Redis分布式鎖的10個坑

jf_ro2CN3Fa ? 來源:撿田螺的小男孩 ? 2023-01-10 10:38 ? 次閱讀


前言

日常開發中,經常會碰到秒殺搶購等業務。為了避免并發請求造成的庫存超賣 等問題,我們一般會用到Redis分布式鎖。但是使用Redis分布式鎖,很容易踩坑哦~ 本文田螺哥將給大家分析闡述,Redis分布式鎖的10個坑~

a83c843e-9088-11ed-bfe3-dac502259ad0.png

基于 Spring Boot + MyBatis Plus + Vue & Element 實現的后臺管理系統 + 用戶小程序,支持 RBAC 動態權限、多租戶、數據權限、工作流、三方登錄、支付、短信、商城等功能

  • 項目地址:https://github.com/YunaiV/ruoyi-vue-pro
  • 視頻教程:https://doc.iocoder.cn/video/

1. 非原子操作(setnx + expire)

一說到實現Redis的分布式鎖,很多小伙伴馬上就會想到setnx+ expire命令。也就是說,先用setnx來搶鎖,如果搶到之后,再用expire給鎖設置一個過期 時間。

偽代碼如下:

if(jedis.setnx(lock_key,lock_value)==1){//加鎖
jedis.expire(lock_key,timeout);//設置過期時間
doBusiness//業務邏輯處理
}

這塊代碼是有坑 的,因為setnxexpire兩個命令是分開寫的,并不是原子操作!如果剛要執行完setnx加鎖,正要執行expire設置過期時間時,進程crash或者要重啟維護了,那么這個鎖就“長生不老 ”了,別的線程永遠獲取不到鎖啦。

基于 Spring Cloud Alibaba + Gateway + Nacos + RocketMQ + Vue & Element 實現的后臺管理系統 + 用戶小程序,支持 RBAC 動態權限、多租戶、數據權限、工作流、三方登錄、支付、短信、商城等功能

  • 項目地址:https://github.com/YunaiV/yudao-cloud
  • 視頻教程:https://doc.iocoder.cn/video/

2. 被別的客戶端請求覆蓋( setnx + value為過期時間)

為了解決:發生異常時,鎖得不到釋放的問題 。有小伙伴提出,可以把過期時間 放到setnxvalue里面。如果加鎖失敗,再拿出value值和當前系統時間校驗一下是否過期即可。偽代碼實現如下:

longexpireTime=System.currentTimeMillis()+timeout;//系統時間+設置的超時時間
StringexpireTimeStr=String.valueOf(expireTime);//轉化為String字符串

//如果當前鎖不存在,返回加鎖成功
if(jedis.setnx(lock_key,expireTimeStr)==1){
returntrue;
}

//如果鎖已經存在,獲取鎖的過期時間
StringoldExpireTimreStr=jedis.get(lock_key);

//如果獲取到的老的預期過期時間,小于系統當前時間,表示已經過期了
if(oldExpireTimreStr!=null&&Long.parseLong(oldExpireTimreStr)//鎖已過期,獲取上一個鎖的過期時間,并設置現在鎖的過期時間(不了解redis的getSet命令的小伙伴,可以去官網看下哈)
StringoldValueStr=jedis.getSet(lock_key,expireTimeStr);

if(oldValueStr!=null&&oldValueStr.equals(oldExpireTimreStr)){
//考慮多線程并發的情況,只有一個線程的設置值和當前值相同,它才可以加鎖
returntrue;
}
}

//其他情況,均返回加鎖失敗
returnfalse;
}

這種實現的方案,也是有坑的:如果鎖過期的時候,并發多個客戶端同時請求過來,都執行jedis.getSet(),最終只能有一個客戶端加鎖成功,但是該客戶端鎖的過期時間,可能被別的客戶端覆蓋

3. 忘記設置過期時間

之前review代碼的時候,看到這樣實現的分布式鎖,偽代碼

try{
if(jedis.setnx(lock_key,lock_value)==1){//加鎖
doBusiness//業務邏輯處理
returntrue;//加鎖成功,處理完業務邏輯返回
}
returnfalse;//加鎖失敗
}finally{
unlock(lockKey);-//釋放鎖
}

這塊有什么問題呢?是的,忘記設置過期時間了 。如果程序在運行期間,機器突然掛了,代碼層面沒有走到finally代碼塊,即在宕機前,鎖并沒有被刪除掉,這樣的話,就沒辦法保證解鎖,所以這里需要給lockKey加一個過期時間。注意哈,使用分布式鎖,一定要設置過期時間哈

4. 業務處理完,忘記釋放鎖

很多小伙伴,會使用Redisset指令擴展參數來實現分布式鎖。

set指令擴展參數:SET key value[EX seconds][PX milliseconds][NX|XX]

-NX:表示key不存在的時候,才能set成功,也即保證只有第一個客戶端請求才能獲得鎖,
而其他客戶端請求只能等其釋放鎖,才能獲取。
- EX seconds :設定key的過期時間,時間單位是秒。
-PXmilliseconds:設定key的過期時間,單位為毫秒
-XX:僅當key存在時設置值

小伙伴會寫出如下偽代碼:

if(jedis.set(lockKey,requestId,"NX","PX",expireTime)==1){//加鎖
doBusiness//業務邏輯處理
returntrue;//加鎖成功,處理完業務邏輯返回
}
returnfalse;//加鎖失敗

這塊偽代碼,初看覺得沒啥問題,但是細想,不太對呀。因為忘記釋放鎖 了!如果每次加鎖成功,都要等到超時時間才釋放鎖 ,是會有問題的。這樣程序不高效,應當每次處理完業務邏輯,都要釋放鎖

正例如下:

try{
if(jedis.set(lockKey,requestId,"NX","PX",expireTime)==1){//加鎖
doBusiness//業務邏輯處理
returntrue;//加鎖成功,處理完業務邏輯返回
}
returnfalse;//加鎖失敗
}finally{
unlock(lockKey);-//釋放鎖
}

5. B的鎖被A給釋放了

我們來看下這塊偽代碼:

try{
if(jedis.set(lockKey,requestId,"NX","PX",expireTime)==1){//加鎖
doBusiness//業務邏輯處理
returntrue;//加鎖成功,處理完業務邏輯返回
}
returnfalse;//加鎖失敗
}finally{
unlock(lockKey);//釋放鎖
}

大家覺得會有哪些坑 呢?

假設在這樣的并發場景下:A、B兩個線程來嘗試給Redis的keylockKey加鎖,A線程先拿到鎖(假如鎖超時時間是3秒后過期)。如果線程A執行的業務邏輯很耗時,超過了3秒還是沒有執行完。這時候,Redis會自動釋放lockKey鎖。剛好這時,線程B過來了,它就能搶到鎖了,開始執行它的業務邏輯,恰好這時,線程A執行完邏輯,去釋放鎖的時候,它就把B的鎖給釋放掉了。

正確的方式應該是,在用set擴展參數加鎖時,放多一個這個線程請求的唯一標記 ,比如requestId,然后釋放鎖的時候,判斷一下是不是剛剛的請求

try{
if(jedis.set(lockKey,requestId,"NX","PX",expireTime)==1){//加鎖
doBusiness//業務邏輯處理
returntrue;//加鎖成功,處理完業務邏輯返回
}
returnfalse;//加鎖失敗
}finally{
if(requestId.equals(jedis.get(lockKey))){//判斷一下是不是自己的requestId
unlock(lockKey);//釋放鎖
}
}

6. 釋放鎖時,不是原子性

以上的這塊代碼,還是有坑:

if(requestId.equals(jedis.get(lockKey))){//判斷一下是不是自己的requestId
unlock(lockKey);//釋放鎖
}

因為判斷是不是當前線程加的鎖和釋放鎖不是一個原子操作 。如果調用unlock(lockKey)釋放鎖的時候,鎖已經過期,所以這把鎖已經可能已經不屬于當前客戶端,會解除他人加的鎖

因此,這個坑就是:判斷和刪除是兩個操作,不是原子的,有一致性問題。釋放鎖必須保證原子性,可以使用Redis+Lua腳本來完成,類似Lua腳本如下:

ifredis.call('get',KEYS[1])==ARGV[1]then
returnredis.call('del',KEYS[1])
else
return0
end;

7. 鎖過期釋放,業務沒執行完

加鎖后,如果超時了,Redis會自動釋放清除鎖,這樣有可能業務還沒處理完,鎖就提前釋放了 。怎么辦呢?

有些小伙伴認為,稍微把鎖過期時間設置長一些就可以啦。其實我們設想一下 ,是否可以給獲得鎖的線程,開啟一個定時守護線程,每隔一段時間檢查鎖是否還存在,存在則對鎖的過期時間延長,防止鎖過期提前釋放。

當前開源框架Redisson解決了這個問題。我們一起來看下Redisson底層原理圖吧:

a85d3788-9088-11ed-bfe3-dac502259ad0.png

只要線程加鎖成功,就會啟動一個watch dog看門狗,它是一個后臺線程 ,會每隔10秒檢查一下,如果線程一還持有鎖,那么就會不斷的延長鎖key的生存時間。因此,Redisson就是使用Redisson解決了鎖過期釋放,業務沒執行完問題

8. Redis分布式鎖和@transactional一起使用失效

大家看下這塊偽代碼:

@Transactional
publicvoidupdateDB(intlockKey){
booleanlockFlag=redisLock.lock(lockKey);
if(!lockFlag){
thrownewRuntimeException(“請稍后再試”);
}
doBusiness//業務邏輯處理
redisLock.unlock(lockKey);
}

在事務中,使用了Redis分布式鎖.這個方法一旦執行,事務生效,接著就Redis分布式鎖生效,代碼執行完后,先釋放Redis分布式鎖,然后再提交事務數據,最后事務結束。在這個過程中,事務沒有提交之前,分布式鎖已經被釋放,導致分布式鎖失效

這是因為:

springAop,會在updateDB方法之前開啟事務,之后再加鎖,當鎖住的代碼執行完成后,再提交事務,因此鎖住的代碼塊執行是在事務之內執行的,可以推斷在代碼塊執行完時,事務還未提交,鎖已經被釋放,此時其他線程拿到鎖之后進行鎖住的代碼塊,讀取的庫存數據不是最新的。

正確的實現方法,可以在updateDB方法之前就上鎖 ,即還沒有開事務之前就加鎖,那么就可以保證線程的安全性.

9. 鎖可重入

前面討論的Redis分布式鎖,都是不可重入的

所謂的不可重入 ,就是當前線程執行某個方法已經獲取了該鎖,那么在方法中嘗試再次獲取鎖時,會阻塞,不可以再次獲得鎖。同一個人拿一個鎖 ,只能拿一次不能同時拿2次。

不可重入的分布式鎖的話,是可以滿足絕大多數的業務場景 。但是有時候一些業務場景,我們還是需要可重入的分布式鎖 ,大家實現分布式鎖的過程中,需要注意一下 ,你當前的業務場景是否需要可重入的分布式鎖。

Redis只要解決這兩個問題,就能實現重入鎖 了:

  • 怎么保存當前持有的線程
  • 怎么維護加鎖次數(即重入了多少次)

實現一個可重入的分布式鎖,我們可以參考JDKReentrantLock的設計思想。實際上,可以直接使用Redisson框架,它是支持可重入鎖的。

10. Redis主從復制導致的坑

實現Redis分布式鎖的話,要注意Redis主從復制的坑 。因為Redis一般都是集群部署的:

a86ba0ac-9088-11ed-bfe3-dac502259ad0.png

如果線程一在Redismaster節點上拿到了鎖,但是加鎖的key還沒同步到slave節點。恰好這時,master節點發生故障,一個slave節點就會升級為master節點。線程二就可以獲取同個key的鎖啦,但線程一也已經拿到鎖了,鎖的安全性就沒了。

為了解決這個問題,Redis作者 antirez提出一種高級的分布式鎖算法RedlockRedlock核心思想是這樣的:

搞多個Redis master部署,以保證它們不會同時宕掉。并且這些master節點是完全相互獨立的,相互之間不存在數據同步。同時,需要確保在這多個master實例上,是與在Redis單實例,使用相同方法來獲取和釋放鎖。

我們假設當前有5Redis master節點,在5臺服務器上面運行這些Redis實例。

a877a62c-9088-11ed-bfe3-dac502259ad0.png

RedLock的實現步驟如下:

  1. 獲取當前時間,以毫秒為單位。
  2. 按順序向5master節點請求加鎖。客戶端設置網絡連接和響應超時時間,并且超時時間要小于鎖的失效時間。(假設鎖自動失效時間為10秒,則超時時間一般在5-50毫秒之間,我們就假設超時時間是50ms吧)。如果超時,跳過該master節點,盡快去嘗試下一個master節點。
  3. 客戶端使用當前時間減去開始獲取鎖時間(即步驟1記錄的時間),得到獲取鎖使用的時間。當且僅當超過一半(N/2+1,這里是5/2+1=3個節點)的Redis master節點都獲得鎖,并且使用的時間小于鎖失效時間時,鎖才算獲取成功。(如上圖,10s> 30ms+40ms+50ms+4m0s+50ms
  4. 如果取到了鎖,key的真正有效時間就變啦,需要減去獲取鎖所使用的時間。
  5. 如果獲取鎖失敗(沒有在至少N/2+1個master實例取到鎖,有或者獲取鎖時間已經超過了有效時間),客戶端要在所有的master節點上解鎖(即便有些master節點根本就沒有加鎖成功,也需要解鎖,以防止有些漏網之魚)。

簡化下步驟就是:

  • 按順序向5個master節點請求加鎖
  • 根據設置的超時時間來判斷,是不是要跳過該master節點。
  • 如果大于等于3個節點加鎖成功,并且使用的時間小于鎖的有效期,即可認定加鎖成功啦。
  • 如果獲取鎖失敗,解鎖!


審核編輯 :李倩


聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 代碼
    +關注

    關注

    30

    文章

    4788

    瀏覽量

    68616
  • 進程
    +關注

    關注

    0

    文章

    203

    瀏覽量

    13961
  • Redis
    +關注

    關注

    0

    文章

    375

    瀏覽量

    10878

原文標題:因Redis分布式鎖造成的S1級重大事故,整個團隊都沒年終獎了。。。

文章出處:【微信號:芋道源碼,微信公眾號:芋道源碼】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    HarmonyOS Next 應用元服務開發-分布式數據對象遷移數據權限與基礎數據

    使用分布式數據對象遷移數據,當需要遷移的數據較大(100KB以上)或需要遷移文件時,可以使用分布式數據對象。原理與接口說明詳見分布式數據對象跨設備數據同步。 說明:自API 12起,由于直接使用跨
    發表于 12-24 09:40

    分布式通信的原理和實現高效分布式通信背后的技術NVLink的演進

    大型模型的大小已經超出了單個 GPU 的范圍。所以就需要實現跨多個 GPU 的模型訓練,這種訓練方式就涉及到了分布式通信和 NVLink。 當談及分布式通信和 NVLink 時,我們進入了一引人入勝且不斷演進的技術領域,下面我
    的頭像 發表于 11-18 09:39 ?455次閱讀
    <b class='flag-5'>分布式</b>通信的原理和實現高效<b class='flag-5'>分布式</b>通信背后的技術NVLink的演進

    分布式光纖測溫解決方案

    分布式光纖測溫解決方案
    的頭像 發表于 11-12 01:02 ?150次閱讀
    <b class='flag-5'>分布式</b>光纖測溫解決方案

    分布式光纖測溫是什么?應用領域是?

    分布式光纖測溫是一種先進的溫度測量技術,它利用光纖的拉曼散射原理進行溫度監測。以下是對分布式光纖測溫的詳細介紹: 一、基本原理 分布式光纖測溫的原理基于光纖的拉曼散射效應。當光纖某處的溫度發生變化
    的頭像 發表于 10-24 15:30 ?375次閱讀
    <b class='flag-5'>分布式</b>光纖測溫是什么?應用領域是?

    分布式輸電線路故障定位中的分布式是指什么

    所謂分布式指的是產品的部署方式,是相對于集中式而言的。 一、部署方式 分散安裝:分布式輸電線路故障定位系統中的采集裝置需要安裝在輸電線路的多個位置,通常是每隔一定距離設置一監測點,以確保對整條線路
    的頭像 發表于 10-16 11:39 ?258次閱讀
    <b class='flag-5'>分布式</b>輸電線路故障定位中的<b class='flag-5'>分布式</b>是指什么

    遠程IO與分布式IO的區別

    在工業自動化和控制系統設計中,遠程IO(Input/Output)和分布式IO是兩重要的概念。它們各自具有獨特的特點和優勢,適用于不同的應用場景。本文將詳細探討遠程IO與分布式IO的區別,包括位置
    的頭像 發表于 06-15 15:57 ?2549次閱讀

    分布式能源是什么意思?分布式能源有什么優勢?

    分布式能源指的是在用戶端或靠近用戶端的小型能源供應系統,它能夠直接滿足用戶的多種能源需求,如電力、熱能和冷能。
    的頭像 發表于 04-29 17:26 ?2293次閱讀

    HarmonyOS開發實例:【分布式數據服務】

    分布式數據服務(Distributed Data Service,DDS)為應用程序提供不同設備間數據分布式的能力。
    的頭像 發表于 04-18 10:18 ?730次閱讀
    HarmonyOS開發實例:【<b class='flag-5'>分布式</b>數據服務】

    HarmonyOS實戰案例:【分布式賬本】

    Demo基于Open Harmony系統使用ETS語言進行編寫,本Demo主要通過設備認證、分布式拉起、分布式數據管理等功能來實現。
    的頭像 發表于 04-12 16:40 ?1333次閱讀
    HarmonyOS實戰案例:【<b class='flag-5'>分布式</b>賬本】

    Redis實現分布式多規則限流的方式介紹

    市面上很多介紹 Redis 如何實現限流的,但是大部分都有一缺點,就是只能實現單一的限流,比如 1 分鐘訪問 1 次或者 60 分鐘訪問 10 次這種,但是如果想一接口兩種規則都需
    的頭像 發表于 02-26 10:07 ?499次閱讀
    <b class='flag-5'>Redis</b>實現<b class='flag-5'>分布式</b>多規則限流的方式介紹

    分布式控制系統的七功能和應用

    分布式控制系統的七功能和應用? 分布式控制系統是一種由多個獨立的控制單元組成的系統,每個控制單元負責系統中的一部分功能。它具有分散的、自治的特性,可以提高系統的可靠性、靈活性和可擴展性。分布
    的頭像 發表于 02-01 10:51 ?1403次閱讀

    鴻蒙OS 分布式任務調度

    鴻蒙OS 分布式任務調度概述 在 HarmonyO S中,分布式任務調度平臺對搭載 HarmonyOS 的多設備構筑的“超級虛擬終端”提供統一的組件管理能力,為應用定義統一的能力基線、接口
    的頭像 發表于 01-29 16:50 ?500次閱讀

    什么是分布式架構?

    分布式架構是指將一系統或應用拆分成多個獨立的節點,這些節點通過網絡連接進行通信和協作,以實現共同完成任務的一種架構模式。這種架構模式旨在提高系統的可擴展性、可靠性和性能表現。 一、分布式架構的特點
    的頭像 發表于 01-12 15:04 ?1244次閱讀
    什么是<b class='flag-5'>分布式</b>架構?

    分布式節點服務器是什么?

    分布式節點服務器是一種將多個服務器分布式連接、協同工作,以實現負載均衡、提高系統性能和可靠性、提供高可用性的服務器架構。 具體來說,分布式節點服務器是通過將一大型系統分成多個子系統,
    的頭像 發表于 01-12 15:04 ?746次閱讀
    <b class='flag-5'>分布式</b>節點服務器是什么?

    任務調度系統設計的核心邏輯

    Redis的讀寫性能極好,分布式也比Quartz數據庫行級更輕量級。當然Redis也可以替
    的頭像 發表于 01-02 15:09 ?888次閱讀
    任務調度系統設計的核心邏輯
    主站蜘蛛池模板: 国语自产拍在线观看7m| 亚洲综合久久久| 五月天精品| 黄色小视频免费看| 欧美成人三级网站| 亚洲1区2区3区4区| 日韩一级在线| 午夜影院普通用户体验区| 黄色网址网站在线观看| 天天看天天射天天碰| 国产精品日本亚洲777| 黄网在线观看免费| 最近2018中文字幕免费看手机| 欧美亚洲另类在线观看| 亚洲国产成人久久| 日韩一区二区三区在线| 夜夜爱夜夜爽夜夜做夜夜欢| 视频在线视频免费观看| 四虎永久免费观看| 影音先锋五月天| 亚洲免费视频一区二区三区| 人人射人人| 日本加勒比高清一本大道| 中国一级特黄特色真人毛片| 激情婷婷网| 成人午夜免费视频毛片| 天堂电影免费在线资源| 亚洲第一免费网站| 男人午夜免费视频| 狠狠色伊人亚洲综合第8页| 92香蕉视频| 三级毛片免费| 欧美三级成人| 午夜三级毛片| 婷婷网五月天天综合天天爱| 精品国产自在在线在线观看| 精品国产免费一区二区| 日本videosgratis教师69| 欧美在线视频一区二区三区| 免费观看在线aa| 天堂综合网|