一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Redis 過期監(jiān)聽怎么實現(xiàn)的

馬哥Linux運維 ? 來源:Hollis ? 作者:Hollis ? 2022-07-01 11:14 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

目錄

前言

Redis 過期監(jiān)聽

RabbitMQ 死信

時間輪

結(jié)論

前言

日前拜讀阿牛老師的大作《領(lǐng)導(dǎo):誰再用定時任務(wù)實現(xiàn)關(guān)閉訂單,立馬滾蛋!》發(fā)現(xiàn)其方案有若干瑕疵,特此拋磚引玉討論一二。

在電商、支付等領(lǐng)域,往往會有這樣的場景,用戶下單后放棄支付了,那這筆訂單會在指定的時間段后進行關(guān)閉操作。

細心的你一定發(fā)現(xiàn)了像某寶、某東都有這樣的邏輯,而且時間很準確,誤差在 1s 內(nèi),那他們是怎么實現(xiàn)的呢?

一般實現(xiàn)的方法有幾種:

使用 RocketMQ、RabbitMQ、Pulsar 等消息隊列的延時投遞功能

使用 Redisson 提供的 DelayedQueue

有一些方案雖然廣為流傳但存在著致命缺陷,不要用來實現(xiàn)延時任務(wù):

使用 Redis 的過期監(jiān)聽

使用 RabbitMQ的死信隊列

使用非持久化的時間輪

Redis 過期監(jiān)聽

在 Redis 官方手冊的 keyspace-notifications: timing-of-expired-events 中明確指出:

Basically expired events are generated when the Redis server deletes the key and not when the time to live theoretically reaches the value of zero

Redis 自動過期的實現(xiàn)方式是:定時任務(wù)離線掃描并刪除部分過期鍵;在訪問鍵時惰性檢查是否過期并刪除過期鍵。

Redis 從未保證會在設(shè)定的過期時間立即刪除并發(fā)送過期通知。實際上,過期通知晚于設(shè)定的過期時間數(shù)分鐘的情況也比較常見。

此外鍵空間通知采用的是發(fā)送即忘(fire and forget)策略,并不像消息隊列一樣保證送達。當訂閱事件的客戶端會丟失所有在斷線期間所有分發(fā)給它的事件。

這是一種比定時掃描數(shù)據(jù)庫更 “LOW” 的解決方案,請不要使用。

RabbitMQ 死信

死信(Dead Letter)是 RabbitMQ 提供的一種機制。

當一條消息滿足下列條件之一那么它會成為死信:

消息被否定確認(如 channel.basicNack)并且此時 requeue 屬性被設(shè)置為 false。

消息在隊列的存活時間超過設(shè)置的 TTL 時間

消息隊列的消息數(shù)量已經(jīng)超過最大隊列長度

若配置了死信隊列,死信會被 RabbitMQ 投到死信隊列中。

在 RabbitMQ 中創(chuàng)建死信隊列的操作流程大概是:

創(chuàng)建一個交換機作為死信交換機

在業(yè)務(wù)隊列中配置 x-dead-letter-exchange 和 x-dead-letter-routing-key,將第一步的交換機設(shè)為業(yè)務(wù)隊列的死信交換機

在死信交換機上創(chuàng)建隊列,并監(jiān)聽此隊列

死信隊列的設(shè)計目的是為了存儲沒有被正常消費的消息,便于排查和重新投遞。死信隊列同樣也沒有對投遞時間做出保證,在第一條消息成為死信之前,后面的消息即使過期也不會投遞為死信。

為了解決這個問題,Rabbit 官方推出了延遲投遞插件 rabbitmq-delayed-message-exchange ,推薦使用官方插件來做延時消息。

這里說點題外話,使用 Redis 過期監(jiān)聽或者 RabbitMQ 死信隊列做延時任務(wù)都是以設(shè)計者預(yù)想之外的方式使用中間件,這種出其不意必自斃的行為通常會存在某些隱患,比如缺乏一致性和可靠性保證,吞吐量較低、資源泄漏等。

比較出名的一個事例是很多人使用 Redis 的 List 作為消息隊列,以致于最后作者看不下去寫了 Disque 并最后演變?yōu)?Redis Stream。工作中還是盡量不要濫用中間件,用專業(yè)的組件做專業(yè)的事。

時間輪

時間輪是一種很優(yōu)秀的定時任務(wù)的數(shù)據(jù)結(jié)構(gòu),然而絕大多數(shù)時間輪實現(xiàn)是純內(nèi)存沒有持久化的。

運行時間輪的進程崩潰之后其中所有的任務(wù)都會灰飛煙滅,所以奉勸各位勇士謹慎使用。

| Redisson DelayQueue

Redisson DelayQueue 是一種基于 Redis Zset 結(jié)構(gòu)的延時隊列實現(xiàn)。DelayQueue 中有一個名為 timeoutSetName 的有序集合,其中元素的 score 為投遞時間戳。

DelayQueue 會定時使用 zrangebyscore 掃描已到投遞時間的消息,然后把它們移動到就緒消息列表中。

DelayQueue 保證 Redis 不崩潰的情況下不會丟失消息,在沒有更好的解決方案時不妨一試。

在數(shù)據(jù)庫索引設(shè)計良好的情況下,定時掃描數(shù)據(jù)庫中未完成的訂單產(chǎn)生的開銷并沒有想象中那么大。

在使用 Redisson DelayQueue 等定時任務(wù)中間件時可以同時使用掃描數(shù)據(jù)庫的方法作為補償機制,避免中間件故障造成任務(wù)丟失。

結(jié)論

總結(jié)了幾點如下:

首先推薦使用 RocketMQ、Pulsar 等擁有定時投遞功能的消息隊列。

在不方便獲得專業(yè)消息隊列時可以考慮使用 Redisson DelayQueue 等基于 Redis 的延時隊列方案,但要為 Redis 崩潰等情況設(shè)計補償保護機制。

在無法使用 Redisson DelayQueue 等方案時可以考慮使用時間輪。由于時間輪重啟遠比 Redis 重啟要頻繁,定時掃庫等保護機制更為重要。

永遠不要使用 Redis 過期監(jiān)聽實現(xiàn)定時任務(wù)。

原文標題:永遠不要使用Redis過期監(jiān)聽實現(xiàn)定時任務(wù)!

文章出處:【微信公眾號:馬哥Linux運維】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

審核編輯:彭靜

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 存儲
    +關(guān)注

    關(guān)注

    13

    文章

    4532

    瀏覽量

    87449
  • 數(shù)據(jù)庫
    +關(guān)注

    關(guān)注

    7

    文章

    3926

    瀏覽量

    66214
  • Redis
    +關(guān)注

    關(guān)注

    0

    文章

    387

    瀏覽量

    11444

原文標題:永遠不要使用Redis過期監(jiān)聽實現(xiàn)定時任務(wù)!

文章出處:【微信號:magedu-Linux,微信公眾號:馬哥Linux運維】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    Redis集群部署配置詳解

    Redis集群是一種分布式Redis解決方案,通過數(shù)據(jù)分片和主從復(fù)制實現(xiàn)高可用性和橫向擴展。集群將整個數(shù)據(jù)集分割成16384個哈希槽(hash slots),每個節(jié)點負責一部分槽位。
    的頭像 發(fā)表于 07-17 11:04 ?81次閱讀

    Redis集群部署與性能優(yōu)化實戰(zhàn)

    Redis作為高性能的內(nèi)存數(shù)據(jù)庫,在現(xiàn)代互聯(lián)網(wǎng)架構(gòu)中扮演著關(guān)鍵角色。作為運維工程師,掌握Redis的部署、配置和優(yōu)化技能至關(guān)重要。本文將從實戰(zhàn)角度出發(fā),詳細介紹Redis集群的搭建、性能優(yōu)化以及監(jiān)控運維的核心技術(shù)。
    的頭像 發(fā)表于 07-08 17:56 ?227次閱讀

    【經(jīng)驗分享】在Omni3576上編譯Redis-8.0.2源碼,并安裝及性能測試

    本文首先介紹Redis是什么,然后介紹如何在Omni3576上編譯Redis-8.0.2源碼,以及從源碼編譯、安裝Redis,最后介紹如何在Omni3576上運行Redis性能測試,并
    的頭像 發(fā)表于 06-05 08:05 ?290次閱讀
    【經(jīng)驗分享】在Omni3576上編譯<b class='flag-5'>Redis</b>-8.0.2源碼,并安裝及性能測試

    【幸狐Omni3576邊緣計算套件試用體驗】Redis最新8.0.2版本源碼安裝及性能測試

    本文首先介紹Redis是什么,然后介紹如何在Omni3576上編譯Redis-8.0.2源碼,以及從源碼編譯、安裝Redis,最后介紹如何在Omni3576上運行Redis性能測試,并
    發(fā)表于 06-03 01:28

    Redis 再次開源!

    “ ?Redis 現(xiàn)已采用 AGPLv3 開源許可證。? ” Redis CEO 的 Blog 以下是 Redis CEO Rowan Trollope 的 Blog: 像 AWS 和 GCP 這樣
    的頭像 發(fā)表于 05-06 18:26 ?396次閱讀

    redis三種集群方案詳解

    Redis中提供的集群方案總共有三種(一般一個redis節(jié)點不超過10G內(nèi)存)。
    的頭像 發(fā)表于 03-31 10:46 ?719次閱讀
    <b class='flag-5'>redis</b>三種集群方案詳解

    如何監(jiān)聽觸摸動作是否松開?

    使用滾輪容器(scrollWheel),需要在使用完滾輪手指松開后切換界面,使用handleDragEvent(const DragEvent&amp; event)來監(jiān)聽觸摸動作,沒有找到獲取動作松開的API。我改怎么實現(xiàn)
    發(fā)表于 03-12 06:58

    Redis實戰(zhàn)筆記

    在目前的技術(shù)選型中,Redis 儼然已經(jīng)成為了系統(tǒng)高性能緩存方案的事實標準,因此現(xiàn)在?Redis 也成為了后端開發(fā)的基本技能樹之一。 ? 基于上述情況,今天給大家分享一份?杰哥?親筆撰寫的內(nèi)部
    的頭像 發(fā)表于 02-09 09:12 ?392次閱讀
    <b class='flag-5'>Redis</b>實戰(zhàn)筆記

    Redis Cluster之故障轉(zhuǎn)移

    1. Redis Cluster 簡介 Redis Cluster 是 Redis 官方提供的 Redis 集群功能。 為什么要實現(xiàn)
    的頭像 發(fā)表于 01-20 09:21 ?891次閱讀
    <b class='flag-5'>Redis</b> Cluster之故障轉(zhuǎn)移

    過期的錫膏是否還能再使用?

    過期的錫膏是否還能再使用,取決于多個因素,包括錫膏的儲存條件、過期時間以及錫膏本身的特性。以下是對過期錫膏能否再使用的詳細分析:
    的頭像 發(fā)表于 12-31 09:15 ?547次閱讀

    華為云Flexus X實例,Redis性能加速評測及對比

    隨著云計算技術(shù)的飛速發(fā)展,Redis 作為一種高性能的內(nèi)存數(shù)據(jù)庫,在各種應(yīng)用場景中發(fā)揮著越來越重要的作用。為了滿足不同用戶對 Redis 性能的高要求,華為云推出了 Flexus X 實例,并提供了
    的頭像 發(fā)表于 12-29 15:47 ?492次閱讀
    華為云Flexus X實例,<b class='flag-5'>Redis</b>性能加速評測及對比

    華為云 Flexus X 輕松實現(xiàn) Redis 一主多從高效部署

    ,F(xiàn)lexus?X 預(yù)裝 Redis 加速鏡像,簡化了 Redis 的安裝和配置流程,降低了技術(shù)門檻,使開發(fā)者能夠更專注于業(yè)務(wù)邏輯的實現(xiàn)。 ????????本文將詳細介紹如何在華為云 Flexus?X 上
    的頭像 發(fā)表于 12-27 13:45 ?490次閱讀
    華為云 Flexus X 輕松<b class='flag-5'>實現(xiàn)</b> <b class='flag-5'>Redis</b> 一主多從高效部署

    Redis緩存與Memcached的比較

    Redis和Memcached都是廣泛使用的內(nèi)存數(shù)據(jù)存儲系統(tǒng),它們主要用于提高應(yīng)用程序的性能,通過減少對數(shù)據(jù)庫的直接訪問來加速數(shù)據(jù)檢索。以下是對Redis和Memcached的比較,涵蓋了它們的一些
    的頭像 發(fā)表于 12-18 09:33 ?589次閱讀

    nginx+lua+redis實現(xiàn)灰度發(fā)布

    作者:馬仁喜 前言: 授人以魚不如授人以漁 .先學會用,在學原理,在學創(chuàng)造,可能一輩子用不到這種能力,但是不能不具備這種能力。這篇文章主要是沉淀使用nginx+lua+redis實現(xiàn)灰度,當我們具備
    的頭像 發(fā)表于 12-17 10:01 ?437次閱讀

    華納云:重置ssl證書的方法有哪些?SSL證書過期的原因有哪些?

    ssl證書是網(wǎng)站的安全后盾,可以保障網(wǎng)站不受外界的攻擊,保證網(wǎng)站數(shù)據(jù)安全,大部分人建站后都會安裝ssl證書。怎么重置ssl證書?網(wǎng)站SSL證書過期的原因有哪些?下面大家就跟隨著華納云一起來詳細
    的頭像 發(fā)表于 09-25 13:52 ?666次閱讀