一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

緩存是什么 為什么需要緩存

倩倩 ? 來(lái)源:未知 ? 作者:科技有點(diǎn)牛 ? 2019-09-28 02:48 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

背景

緩存是軟件開(kāi)發(fā)中一個(gè)非常有用的概念,數(shù)據(jù)庫(kù)緩存更是在項(xiàng)目中必然會(huì)遇到的場(chǎng)景。而緩存一致性的保證,更是在面試中被反復(fù)問(wèn)到,這里進(jìn)行一下總結(jié),針對(duì)不同的要求,選擇恰到好處的一致性方案。

緩存是什么 為什么需要緩存

緩存是什么

存儲(chǔ)的速度是有區(qū)別的。緩存就是把低速存儲(chǔ)的結(jié)果,臨時(shí)保存在高速存儲(chǔ)的技術(shù)。

如圖所示,金字塔更上面的存儲(chǔ),可以作為下面存儲(chǔ)的緩存。我們本次的討論,主要針對(duì)數(shù)據(jù)庫(kù)緩存場(chǎng)景,將以redis作為mysql的緩存為案例來(lái)進(jìn)行。

為什么需要緩存

存儲(chǔ)如mysql通常支持完整的ACID特性,因?yàn)榭煽啃裕志眯缘纫蛩?,性能普遍不高,高并發(fā)的查詢會(huì)給mysql帶來(lái)壓力,造成數(shù)據(jù)庫(kù)系統(tǒng)的不穩(wěn)定。同時(shí)也容易產(chǎn)生延遲。根據(jù)局部性原理,80%請(qǐng)求會(huì)落到20%的熱點(diǎn)數(shù)據(jù)上,在讀多寫(xiě)少場(chǎng)景,增加一層緩存非常有助提升系統(tǒng)吞吐量和健壯性。

存在問(wèn)題

存儲(chǔ)的數(shù)據(jù)隨著時(shí)間可能會(huì)發(fā)生變化,而緩存中的數(shù)據(jù)就會(huì)不一致。具體能容忍的不一致時(shí)間,需要具體業(yè)務(wù)具體分析,但是通常的業(yè)務(wù),都需要做到最終一致。

redis作為mysql緩存

通常的開(kāi)發(fā)模式中,都會(huì)使用mysql作為存儲(chǔ),而redis作為緩存,加速和保護(hù)mysql。但是,當(dāng)mysql數(shù)據(jù)更新之后,redis怎么保持同步呢。

強(qiáng)一致性同步成本太高,如果追求強(qiáng)一致,那么沒(méi)必要用緩存了,直接用mysql即可。通常考慮的,都是最終一致性。

解決方案

方案一

通過(guò)key的過(guò)期時(shí)間,mysql更新時(shí),redis不更新。 這種方式實(shí)現(xiàn)簡(jiǎn)單,但不一致的時(shí)間會(huì)很長(zhǎng)。如果讀請(qǐng)求非常頻繁,且過(guò)期時(shí)間比較長(zhǎng),則會(huì)產(chǎn)生很多長(zhǎng)期的臟數(shù)據(jù)。

優(yōu)點(diǎn):

開(kāi)發(fā)成本低,易于實(shí)現(xiàn);

管理成本低,出問(wèn)題的概率會(huì)比較小。

不足:

完全依賴過(guò)期時(shí)間,時(shí)間太短容易緩存頻繁失效,太長(zhǎng)容易有長(zhǎng)時(shí)間更新延遲

方案二

在方案一的基礎(chǔ)上擴(kuò)展,通過(guò)key的過(guò)期時(shí)間兜底,并且,在更新mysql時(shí),同時(shí)更新redis。

優(yōu)點(diǎn):

相對(duì)方案一,更新延遲更小。

不足:

如果更新mysql成功,更新redis卻失敗,就退化到了方案一;

在高并發(fā)場(chǎng)景,業(yè)務(wù)server需要和mysql,redis同時(shí)進(jìn)行連接。這樣是損耗雙倍的連接資源,容易造成連接數(shù)過(guò)多的問(wèn)題。

方案三

針對(duì)方案二的同步寫(xiě)redis進(jìn)行優(yōu)化,增加消息隊(duì)列,將redis更新操作交給kafka,由消息隊(duì)列保證可靠性,再搭建一個(gè)消費(fèi)服務(wù),來(lái)異步更新redis。

優(yōu)點(diǎn):

消息隊(duì)列可以用一個(gè)句柄,很多消息隊(duì)列客戶端還支持本地緩存發(fā)送,有效解決了方案二連接數(shù)過(guò)多的問(wèn)題;

使用消息隊(duì)列,實(shí)現(xiàn)了邏輯上的解耦;

消息隊(duì)列本身具有可靠性,通過(guò)手動(dòng)提交等手段,可以至少一次消費(fèi)到redis。

不足:

依舊解決不了時(shí)序性問(wèn)題,如果多臺(tái)業(yè)務(wù)服務(wù)器分別處理針對(duì)同一行數(shù)據(jù)的兩條請(qǐng)求,舉個(gè)栗子,a = 1; a = 5;,如果mysql中是第一條先執(zhí)行,而進(jìn)入kafka的順序是第二條先執(zhí)行,那么數(shù)據(jù)就會(huì)產(chǎn)生不一致。

引入了消息隊(duì)列,同時(shí)要增加服務(wù)消費(fèi)消息,成本較高。

方案四

通過(guò)訂閱binlog來(lái)更新redis,把我們搭建的消費(fèi)服務(wù),作為mysql的一個(gè)slave,訂閱binlog,解析出更新內(nèi)容,再更新到redis。

優(yōu)點(diǎn):

在mysql壓力不大情況下,延遲較低;

和業(yè)務(wù)完全解耦;

解決了時(shí)序性問(wèn)題。

缺點(diǎn):

要單獨(dú)搭建一個(gè)同步服務(wù),并且引入binlog同步機(jī)制,成本較大。

總結(jié)

方案選型

首先確認(rèn)產(chǎn)品上對(duì)延遲性的要求,如果要求極高,且數(shù)據(jù)有可能變化,別用緩存。

通常來(lái)說(shuō),方案1就夠了,筆者咨詢過(guò)4,5個(gè)團(tuán)隊(duì),基本都是用方案1,因?yàn)槟苡镁彺娣桨福ǔJ亲x多寫(xiě)少場(chǎng)景,同時(shí)業(yè)務(wù)上對(duì)延遲具有一定的包容性。方案1沒(méi)有開(kāi)發(fā)成本,其實(shí)比較實(shí)用。

如果想增加更新時(shí)的即時(shí)性,就選擇方案2,不過(guò)沒(méi)必要做重試保證之類(lèi)的。

方案3,方案4針對(duì)于對(duì)延時(shí)要求比較高業(yè)務(wù),一個(gè)是推模式,一個(gè)是拉模式,而方案4具備更強(qiáng)的可靠性,既然都愿意花功夫做處理消息的邏輯,不如一步到位,用方案4。

結(jié)論

一般情況,方案1夠用。若延時(shí)要求高,直接選擇方案4。如果是面試場(chǎng)景,從簡(jiǎn)單講到復(fù)雜,面試官會(huì)一步一步追問(wèn),咱們就一點(diǎn)點(diǎn)推導(dǎo),賓主盡歡。

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 緩存
    +關(guān)注

    關(guān)注

    1

    文章

    246

    瀏覽量

    27205
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    本地緩存的技術(shù)實(shí)踐

    面試的時(shí)候,連緩存都不清楚,那確實(shí)多少顯的有些尷尬! 項(xiàng)目里面為什么要引入緩存?這個(gè)問(wèn)題還得結(jié)合項(xiàng)目中的業(yè)務(wù)來(lái)回答! 引入緩存,其實(shí)主要有兩個(gè)用途: 高性能 、 高并發(fā) ! 假設(shè)某個(gè)操作非常頻繁,比如網(wǎng)站的商城首頁(yè),
    的頭像 發(fā)表于 09-30 15:29 ?979次閱讀
    本地<b class='flag-5'>緩存</b>的技術(shù)實(shí)踐

    硬盤(pán)緩存

    硬盤(pán)緩存              緩存(Cache)是SCSI硬盤(pán)與外部總線交換數(shù)據(jù)的場(chǎng)所,硬盤(pán)先將數(shù)據(jù)傳送到緩存,再由
    發(fā)表于 12-17 14:43 ?1301次閱讀

    硬盤(pán)緩存是什么?

    硬盤(pán)緩存是什么? 緩存是硬盤(pán)內(nèi)部的高速存儲(chǔ)器,硬盤(pán)需要通過(guò)它來(lái)完成與外部數(shù)據(jù)總線交換數(shù)據(jù)的過(guò)程。硬盤(pán)本身的高速緩存(Cache)
    發(fā)表于 01-22 10:40 ?808次閱讀

    Mybatis緩存之一級(jí)緩存

    是SqlSession級(jí)別的緩存。在操作數(shù)據(jù)庫(kù)時(shí)需要構(gòu)造sqlSession對(duì)象,在對(duì)象中有一個(gè)數(shù)據(jù)結(jié)構(gòu)(HashMap)用于存儲(chǔ)緩存數(shù)據(jù)。不同的sqlSession之間的緩存數(shù)據(jù)區(qū)域
    發(fā)表于 11-27 20:44 ?1317次閱讀
    Mybatis<b class='flag-5'>緩存</b>之一級(jí)<b class='flag-5'>緩存</b>

    渲染中的幀緩存和深度緩存

    渲染涉及大量的緩存,這里緩存只是一個(gè)簡(jiǎn)單的存有像素?cái)?shù)據(jù)的矩形內(nèi)存塊,最重要緩存是幀緩存和深度緩存。
    的頭像 發(fā)表于 05-14 11:44 ?7242次閱讀
    渲染中的幀<b class='flag-5'>緩存</b>和深度<b class='flag-5'>緩存</b>

    什么是Web緩存,HTTP緩存和瀏覽器緩存的區(qū)別

    前端緩存主要是分為HTTP緩存和瀏覽器緩存。其中HTTP緩存是在HTTP請(qǐng)求傳輸時(shí)用到的緩存,主要在服務(wù)器代碼上設(shè)置;而瀏覽器
    發(fā)表于 09-13 04:17 ?9685次閱讀
    什么是Web<b class='flag-5'>緩存</b>,HTTP<b class='flag-5'>緩存</b>和瀏覽器<b class='flag-5'>緩存</b>的區(qū)別

    緩存的基本原理 緩存的分類(lèi)

    緩存的主要手段有:瀏覽器緩存、CDN、反向代理、本地緩存、分布式緩存、數(shù)據(jù)庫(kù)緩存。
    發(fā)表于 06-13 12:04 ?5134次閱讀

    緩存如何工作,如何設(shè)計(jì)CPU緩存

    20世紀(jì)80年代,CPU性能有了顯著提升,但這受到板載內(nèi)存訪問(wèn)速度緩慢增長(zhǎng)的阻礙。隨著這種差異的惡化,工程師們發(fā)現(xiàn)了一種通過(guò)新的設(shè)計(jì)技術(shù)緩存來(lái)解決問(wèn)題的方法。本文將幫助你進(jìn)一步了解什么是緩存,它如何工作以及如何設(shè)計(jì)CPU緩存
    的頭像 發(fā)表于 11-19 17:23 ?3037次閱讀

    弄懂HTTP緩存機(jī)制及原理

    兩類(lèi)緩存規(guī)則可以同時(shí)存在,強(qiáng)制緩存優(yōu)先級(jí)高于對(duì)比緩存,也就是說(shuō),當(dāng)執(zhí)行強(qiáng)制緩存的規(guī)則時(shí),如果緩存生效,直接使用
    的頭像 發(fā)表于 01-29 09:38 ?952次閱讀

    聊聊本地緩存和分布式緩存

    本地緩存 :應(yīng)用中的緩存組件,緩存組件和應(yīng)用在同一進(jìn)程中,緩存的讀寫(xiě)非???,沒(méi)有網(wǎng)絡(luò)開(kāi)銷(xiāo)。但各應(yīng)用或集群的各節(jié)點(diǎn)都需要維護(hù)自己的單獨(dú)
    發(fā)表于 06-11 15:12 ?1071次閱讀
    聊聊本地<b class='flag-5'>緩存</b>和分布式<b class='flag-5'>緩存</b>

    mybatis一級(jí)緩存和二級(jí)緩存的原理

    MyBatis是一種輕量級(jí)的持久化框架,它提供了一級(jí)緩存和二級(jí)緩存的機(jī)制來(lái)優(yōu)化數(shù)據(jù)庫(kù)操作性能。一級(jí)緩存是默認(rèn)開(kāi)啟的,而二級(jí)緩存需要手動(dòng)配置啟
    的頭像 發(fā)表于 12-03 11:55 ?1540次閱讀

    Redis緩存預(yù)熱+緩存雪崩+緩存擊穿+緩存穿透要點(diǎn)簡(jiǎn)析

    緩存預(yù)熱就是系統(tǒng)上線后,提前將相關(guān)的緩存數(shù)據(jù)直接加載到緩存系統(tǒng)。
    的頭像 發(fā)表于 12-25 09:41 ?1184次閱讀
    Redis<b class='flag-5'>緩存</b>預(yù)熱+<b class='flag-5'>緩存</b>雪崩+<b class='flag-5'>緩存</b>擊穿+<b class='flag-5'>緩存</b>穿透要點(diǎn)簡(jiǎn)析

    緩存之美——如何選擇合適的本地緩存?

    Guava cache是Google開(kāi)發(fā)的Guava工具包中一套完善的JVM本地緩存框架,底層實(shí)現(xiàn)的數(shù)據(jù)結(jié)構(gòu)類(lèi)似于ConcurrentHashMap,但是進(jìn)行了更多的能力拓展,包括緩存過(guò)期時(shí)間設(shè)置、緩存容量設(shè)置、多種淘汰策略、
    的頭像 發(fā)表于 11-17 14:24 ?825次閱讀
    <b class='flag-5'>緩存</b>之美——如何選擇合適的本地<b class='flag-5'>緩存</b>?

    HTTP緩存頭的使用 本地緩存與遠(yuǎn)程緩存的區(qū)別

    HTTP緩存頭是一組HTTP響應(yīng)頭,它們控制瀏覽器和中間代理服務(wù)器如何緩存網(wǎng)頁(yè)內(nèi)容。合理使用HTTP緩存頭可以顯著提高網(wǎng)站的加載速度和性能,減少服務(wù)器的負(fù)載。 1. HTTP緩存頭概述
    的頭像 發(fā)表于 12-18 09:41 ?473次閱讀

    高性能緩存設(shè)計(jì):如何解決緩存偽共享問(wèn)題

    在多核高并發(fā)場(chǎng)景下, 緩存偽共享(False Sharing) 是導(dǎo)致性能驟降的“隱形殺手”。當(dāng)不同線程頻繁修改同一緩存行(Cache Line)中的獨(dú)立變量時(shí),CPU緩存一致性協(xié)議會(huì)強(qiáng)制同步整個(gè)
    的頭像 發(fā)表于 07-01 15:01 ?134次閱讀
    高性能<b class='flag-5'>緩存</b>設(shè)計(jì):如何解決<b class='flag-5'>緩存</b>偽共享問(wèn)題