0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

汽車玩家 ? 來源:簡書 ? 作者:Java微服務 ? 2020-05-03 14:36 ? 次閱讀

前言

在分布式系統(tǒng)中,緩存和數(shù)據(jù)庫同時存在時,如果有寫操作的時候,先操作數(shù)據(jù)庫還是先操作緩存呢?先思考一下,可能會存在哪些問題,再往下看。下面我分幾種方案闡述。

緩存維護方案一

假設有一寫(線程A)一讀(線程B)操作,先操作緩存,在操作數(shù)據(jù)庫。,如下流程圖所示:

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

1)線程A發(fā)起一個寫操作,第一步del cache

2)線程A第二步寫入新數(shù)據(jù)到DB

3)線程B發(fā)起一個讀操作,cache miss,

4)線程B從DB獲取最新數(shù)據(jù)

5)請求B同時set cache

這樣看,沒啥問題。我們再看第二個流程圖,如下:

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

1)線程A發(fā)起一個寫操作,第一步del cache

2)此時線程B發(fā)起一個讀操作,cache miss

3)線程B繼續(xù)讀DB,讀出來一個老數(shù)據(jù)

4)然后老數(shù)據(jù)入cache

5)線程A寫入了最新的數(shù)據(jù)

OK,醬紫,就有問題了吧,老數(shù)據(jù)入到緩存了,每次讀都是老數(shù)據(jù)啦,緩存與數(shù)據(jù)與數(shù)據(jù)庫數(shù)據(jù)不一致。

緩存維護方案二

雙寫操作,先操作緩存,在操作數(shù)據(jù)庫。

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

1)線程A發(fā)起一個寫操作,第一步set cache

2)線程A第二步寫入新數(shù)據(jù)到DB

3)線程B發(fā)起一個寫操作,set cache,

4)線程B第二步寫入新數(shù)據(jù)到DB

這樣看,也沒啥問題。,但是有時候可能事與愿違,我們再看第二個流程圖,如下:

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

1)線程A發(fā)起一個寫操作,第一步set cache

2)線程B發(fā)起一個寫操作,第一步setcache

3)線程B寫入數(shù)據(jù)庫到DB

4)線程A寫入數(shù)據(jù)庫到DB

執(zhí)行完后,緩存保存的是B操作后的數(shù)據(jù),數(shù)據(jù)庫是A操作后的數(shù)據(jù),緩存和數(shù)據(jù)庫數(shù)據(jù)不一致。

緩存維護方案三

一寫(線程A)一讀(線程B)操作,先操作數(shù)據(jù)庫,再操作緩存。

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

1)線程A發(fā)起一個寫操作,第一步write DB

2)線程A第二步del cache

3)線程B發(fā)起一個讀操作,cache miss

4)線程B從DB獲取最新數(shù)據(jù)

5)線程B同時set cache

這種方案沒有明顯的并發(fā)問題,但是有可能步驟二刪除緩存失敗,雖然概率比較小,優(yōu)于方案一和方案二,平時工作中也是使用方案三。

綜上對比,我們一般采用方案三,但是有沒有完美全解決方案三的弊端的方法呢?

緩存維護方案四

這個是方案三的改進方案,都是先操作數(shù)據(jù)庫再操作緩存,我們來看一下流程圖:

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

通過數(shù)據(jù)庫的binlog來異步淘汰key,以mysql為例 可以使用阿里的canal將binlog日志采集發(fā)送到MQ隊列里面,然后通過ACK機制 確認處理這條更新消息,刪除緩存,保證數(shù)據(jù)緩存一致性。

但是呢還有個問題,如果是主從數(shù)據(jù)庫呢?

緩存維護方案五

主從DB問題:因為主從DB同步存在同時延時時間如果刪除緩存之后,數(shù)據(jù)同步到備庫之前已經(jīng)有請求過來時,會從備庫中讀到臟數(shù)據(jù),如何解決呢?解決方案如下流程圖:

分布式系統(tǒng)中的數(shù)據(jù)庫和緩存操作順序

緩存維護總結(jié)

綜上所述,在分布式系統(tǒng)中,緩存和數(shù)據(jù)庫同時存在時,如果有寫操作的時候,先操作數(shù)據(jù)庫,再操作緩存。如下:

(1)讀取緩存中是否有相關數(shù)據(jù)

(2)如果緩存中有相關數(shù)據(jù)value,則返回

(3)如果緩存中沒有相關數(shù)據(jù),則從數(shù)據(jù)庫讀取相關數(shù)據(jù)放入緩存中key->value,再返回

(4)如果有更新數(shù)據(jù),則先更新數(shù)據(jù),再刪除緩存

(5)為了保證第四步刪除緩存成功,使用binlog異步刪除

(6)如果是主從數(shù)據(jù)庫,binglog取自于從庫

(7)如果是一主多從,每個從庫都要采集binlog,然后消費端收到最后一臺binlog數(shù)據(jù)才刪除緩存

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
收藏 人收藏

    評論

    相關推薦

    分布式云化數(shù)據(jù)庫的優(yōu)缺點分析

    分布式云化數(shù)據(jù)庫的優(yōu)點主要體現(xiàn)在高可用性和容錯性、可擴展性、體系結(jié)構、數(shù)據(jù)一致性、成本、升級迭代等方面。同時也存在一些缺點,如通信開銷較大、數(shù)據(jù)的存取結(jié)構復雜、
    的頭像 發(fā)表于 09-14 09:42 ?124次閱讀

    基于分布式存儲WDS的金融信創(chuàng)云承載數(shù)據(jù)庫類關鍵應用

    基于分布式存儲WDS的金融信創(chuàng)云承載數(shù)據(jù)庫類關鍵應用
    的頭像 發(fā)表于 08-16 09:42 ?139次閱讀
    基于<b class='flag-5'>分布式</b>存儲WDS的金融信創(chuàng)云承載<b class='flag-5'>數(shù)據(jù)庫</b>類關鍵應用

    Memcached介紹和詳解

    ,Memcached可以顯著減輕后端數(shù)據(jù)庫和Web服務器的負載。 Memcached作為一個高性能的內(nèi)存緩存系統(tǒng),通過緩存經(jīng)常訪問的數(shù)據(jù)來提
    發(fā)表于 07-17 15:58

    鴻蒙開發(fā)接口數(shù)據(jù)管理:【@ohos.data.distributedData (分布式數(shù)據(jù)管理)】

    分布式數(shù)據(jù)管理為應用程序提供不同設備間數(shù)據(jù)庫分布式協(xié)同能力。通過調(diào)用分布式數(shù)據(jù)各個接口,應用程
    的頭像 發(fā)表于 06-07 09:30 ?721次閱讀
    鴻蒙開發(fā)接口<b class='flag-5'>數(shù)據(jù)</b>管理:【@ohos.data.distributedData (<b class='flag-5'>分布式</b><b class='flag-5'>數(shù)據(jù)</b>管理)】

    鴻蒙HarmonyOS開發(fā)實例:【分布式關系型數(shù)據(jù)庫

    使用[@ohos.data.relationalStore]接口和[@ohos.distributedDeviceManager]?接口展示了在eTS中分布式關系型數(shù)據(jù)庫的使用,在增、刪、改、查的基本操作外,還包括
    的頭像 發(fā)表于 04-11 09:52 ?599次閱讀
    鴻蒙HarmonyOS開發(fā)實例:【<b class='flag-5'>分布式</b>關系型<b class='flag-5'>數(shù)據(jù)庫</b>】

    分布式鎖的三種實現(xiàn)方式

    ,下面將分別介紹三種常見的實現(xiàn)方式。 一、基于數(shù)據(jù)庫實現(xiàn)的分布式鎖 在分布式系統(tǒng),數(shù)據(jù)庫是最常
    的頭像 發(fā)表于 12-28 10:01 ?703次閱讀

    oracle數(shù)據(jù)庫的基本操作

    Oracle數(shù)據(jù)庫是一種關系數(shù)據(jù)庫管理系統(tǒng)(RDBMS),廣泛應用于企業(yè)級應用。它具有強大的功能和靈活的配置選項,可以滿足復雜的數(shù)據(jù)處理需
    的頭像 發(fā)表于 12-06 10:14 ?548次閱讀

    分布式系統(tǒng)硬件資源池原理和接入實踐

    和音頻驅(qū)動信息,存入分布式數(shù)據(jù)庫。如果 AB 兩個設備建立了可信關系并且通過軟總線組網(wǎng)上線成功,分布式數(shù)據(jù)庫會在 AB 兩個設備之間自動同步各自的本地外設數(shù)據(jù)信息,這樣,設備 A 分布式
    發(fā)表于 12-06 10:02

    redis分布式鎖的應用場景有哪些

    系統(tǒng),多個節(jié)點可能同時訪問共享資源,例如數(shù)據(jù)庫、文件系統(tǒng)等。使用Redis分布式鎖可以保證在同一時刻只有一個節(jié)點能夠訪問該資源,避免了并發(fā)
    的頭像 發(fā)表于 12-04 11:21 ?1258次閱讀

    分布式數(shù)據(jù)恢復-hbase+hive分布式存儲誤刪除文件的數(shù)據(jù)恢復方案

    hbase+hive分布式存儲數(shù)據(jù)恢復環(huán)境: 16臺某品牌R730XD服務器節(jié)點,每臺物理服務器節(jié)點上有數(shù)臺虛擬機,虛擬機上配置的分布式,上層部署hbase數(shù)據(jù)庫+hive
    的頭像 發(fā)表于 11-24 15:55 ?333次閱讀

    springcloud分布式事務解決方案

    不同的微服務之間進行數(shù)據(jù)交互時,可能會出現(xiàn)一致性問題。 分布式事務的定義是一個操作或者一組操作,要么全部執(zhí)行成功,要么全部不執(zhí)行。在傳統(tǒng)的單體應用程序
    的頭像 發(fā)表于 11-16 11:03 ?1884次閱讀

    HarmonyOS分布式文件系統(tǒng)開發(fā)指導

    監(jiān)聽、通過軟總線建立鏈路,并根據(jù)分布式的設備安全等級執(zhí)行不同的數(shù)據(jù)流轉(zhuǎn)策略。 ● hmdfs:實現(xiàn)在內(nèi)核的網(wǎng)絡文件系統(tǒng),包括緩存管理、文件訪問、元數(shù)
    發(fā)表于 11-14 17:14

    tldb提供分布式鎖使用方法

    前言:分布式鎖是分布式系統(tǒng)中一個極為重要的工具。目前有多種分布式鎖的設計方案,比如借助 redis,mq,數(shù)據(jù)庫,zookeeper 等第三
    的頭像 發(fā)表于 11-02 14:44 ?779次閱讀
    tldb提供<b class='flag-5'>分布式</b>鎖使用方法

    數(shù)據(jù)庫如何實現(xiàn)分布式

    1. 前言 分布式應用,有時我們需要一個方法在同一時間只能被一個線程執(zhí)行。此時我們有可能會使用到分布式鎖。 分布式鎖需要具備以下特征: 互斥性 同一時刻鎖只能被一個線程持有。 超時釋
    的頭像 發(fā)表于 10-08 16:12 ?4456次閱讀

    如何解決數(shù)據(jù)庫緩存一致性

    壓力。當乘客購買成功之后,數(shù)據(jù)庫發(fā)生了變化,需要及時更新緩存數(shù)據(jù),以便于其他乘客能從緩存
    的頭像 發(fā)表于 09-25 15:25 ?911次閱讀
    如何解決<b class='flag-5'>數(shù)據(jù)庫</b>與<b class='flag-5'>緩存</b>一致性