0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

并發(fā)場景下如何保證數(shù)據(jù)操作的準確性?

jf_ro2CN3Fa ? 來源:juejin.cn ? 2023-07-09 16:02 ? 次閱讀

  • Part One
  • Part Two


Part One

我們假想一個場景,在并發(fā)場景下,假如要對賬戶余額(tb_balance.balance)進行增加和減少余額,要怎么設(shè)計才能保證數(shù)據(jù)不出錯呢?

下面是我的一些設(shè)想(假設(shè)余額更新20或減少20):

直接sql更新

直接balance自增20,怎么并發(fā)都余額都不會錯了是不是~,但這里會有問題,1.假如是減余額的話,要注意余額不能小于0 2.假如后續(xù)需要用這個余額結(jié)果再進行一些業(yè)務(wù)操作的話,是取不到這個余額的sql

updatetb_balancesetbalance=balance+20wherebalance=#{old_bal}anduser_id=#{user_id}

CAS

經(jīng)典的compare and swap,就是入庫時去對比舊值是否與現(xiàn)數(shù)據(jù)庫中的值相等,若相等則更新否則不更新,但是會有風(fēng)險,就是經(jīng)典的aba問題。假如更新返回的影響數(shù)為0的話,說明余額已經(jīng)發(fā)生了變化,所以需要拋出異常并進行重試。(這里需要寫一些補償?shù)臉I(yè)務(wù)邏輯去處理余額更新失敗的問題)

/**
*用戶余額增加20
*newBal為新值
*oldBal為庫中查出的值
**/
oldBal=balService.getBal(userId);
newBal=oldBal+20;

intcount=balService.updateBal(newBal,oldBal,userId);
Assert.businessInvalid(count==0,"updateerror");

//todosomebuisness
updatetb_balancesetbalance=#{new_bal}wherebalance=#{old_bal}anduser_id=#{user_id}

樂觀鎖

樂觀鎖其實就是使用version去進行版本控制,在更新時判斷是否更新數(shù)據(jù)的版本與現(xiàn)庫內(nèi)版本是一致的,若一致則更改并上升版本號,否則認為在此期間有其它線程進行數(shù)據(jù)更新。假如更新失敗的話,同樣進行重試處理。這樣的好處就是可以避免aba問題,同時也可以使用增加后的余額進行后續(xù)的操作。目前已知有些公司就是這么操作的

try{
//dosomebuisness
intcount=balService.updateBal(newBal,old_version,new_version,userId);
Assert.businessInvalid(count==0,"updateerror");
//dosomebuisness
}catch(){
//iffailtodosomethingtryagain
}
updatetb_balancesetbalance=#{balance}andbalance=#{new_version}whereversion=#{old_version}anduser_id=#{user_id}

--ifaffectcount>1success
--ifaffectcount=0retry

redission分布式鎖

像集群的項目,我們經(jīng)常會使用分布式鎖去保證冪等性,如果只有單一接口會去操作賬戶余額那使用分布式鎖沒有問題,只要在該接口加上鎖,保證同一時間只有單一線程進行該業(yè)務(wù)操作即可;但往往實際業(yè)務(wù)場景并不會那么簡單,比如一個商城,可能會有幾十上百個入口可以對余額進行變更,比如定時扣費、訂單支付、替他人代付等等;那其實可以通過面向?qū)ο蟮乃枷?,將余額的操作進行抽象,抽象出一個余額類,將該類的方法加上鎖,然后所有的業(yè)務(wù)都強制通過該類進行余額變更的操作,即可保證操作的可靠性。

所以也就是說,訂單系統(tǒng)、服務(wù)管理中心等等服務(wù)都不應(yīng)該能直接操作到余額數(shù)據(jù),還是得抽出一個類型財務(wù)中臺的東東去統(tǒng)一處理余額,然后財務(wù)中臺中又維護這么一個余額類去保證更新的可靠性? 這其實也就是軟件工程中的單一入口 思想吧

基于 Spring Boot + MyBatis Plus + Vue & Element 實現(xiàn)的后臺管理系統(tǒng) + 用戶小程序,支持 RBAC 動態(tài)權(quán)限、多租戶、數(shù)據(jù)權(quán)限、工作流、三方登錄、支付、短信、商城等功能

  • 項目地址:https://github.com/YunaiV/ruoyi-vue-pro
  • 視頻教程:https://doc.iocoder.cn/video/

Part Two

業(yè)務(wù)背景:現(xiàn)在實際開發(fā)過程中會有這樣一種場景,訂單表a作為訂單業(yè)務(wù)核心表,而會有a1,a2,a3...an個業(yè)務(wù)會去更新訂單表a的狀態(tài),而同時a.status(訂單狀態(tài))也是作為b,c,d...業(yè)務(wù)操作的核心判斷依據(jù)(也就是在不同的訂單狀態(tài)下可能做的操作是截然相反的)

在代碼層面上,我們一般的寫法是直接用注解開個事務(wù),以保證操作的原子性。這種寫法目前讓我們的業(yè)務(wù)還是平穩(wěn)運行的~

//@apiLock是redis鎖
@ApiLock
@Transactional
publicvoiddosomething(){

}

那么假設(shè)用戶量激增,并發(fā)量暴漲,那么會出現(xiàn)什么情況呢?

搞事情的時間來了,事務(wù)只能保證單個操作的事務(wù)性,假如并發(fā)量高的時候,可能就會出現(xiàn)(假設(shè)b業(yè)務(wù)的前提是a訂單再待接單[wait_acceipt]的狀態(tài)):

b業(yè)務(wù)查詢時,a.status=wait_acceipt,然后b業(yè)務(wù)開始處理;而此時,a1業(yè)務(wù)對a訂單進行操作,并且先于b業(yè)務(wù)處理完,這時a訂單走到了待服務(wù)(wait_service),而b還在進行業(yè)務(wù)處理;然后b業(yè)務(wù)處理完成,并進行提交。

那么就會產(chǎn)生很多異常的數(shù)據(jù)了,而且影響范圍會很大

解決方案&一些思考

我們可以關(guān)注到,這個場景的問題點其實并不在數(shù)據(jù)的插入與更新,而是在讀取,在業(yè)務(wù)處理過程怎么在確定訂單狀態(tài)沒有發(fā)生改變

使用redis鎖,在讀取訂單時候?qū)τ唵芜M行上鎖,業(yè)務(wù)結(jié)束之后再釋放

單一入口 :將訂單類的操作抽象成一個order類,然后在這個order類中去進行查詢 操作,或者在不同服務(wù)中用一個redis-key也是OK的

publicclassOrderService{

lock()

select()

unlock()

}
publicvoiddosomeB(){
try{
orderService.lock(serviceOrderId);
//todo
}finally(){
orderService.unlock(serviceOrderId);
}
}

使用mysql共享鎖(讀鎖),在數(shù)據(jù)庫層面進行阻塞,更加精準,并且不使用單一入口也是可以的,但是可能存在索引失效鎖表的風(fēng)險(核心表被鎖就炸了)

publicclassOrderService{
/**
*讀取并且上鎖
*/
selectAndLock()

/**
*讀取
*/
select()
}
--讀鎖會阻塞寫(X),但是不會堵塞讀(S),在事務(wù)提交后,讀鎖會自動釋放
selectxxxfromorderwhereservice_order_id=xxxlockinsharemode;

總體來說 ,思想就是對正在操作的數(shù)據(jù)進行加讀鎖,阻塞其它的線程。當(dāng)然這種方案也是雙刃劍,畢竟會減少吞吐量,還是應(yīng)該進行業(yè)務(wù)梳理,確定加鎖的必要性,避免過分設(shè)計~像現(xiàn)在的系統(tǒng),我就沒去動它,hh~


聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 數(shù)據(jù)庫
    +關(guān)注

    關(guān)注

    7

    文章

    3752

    瀏覽量

    64233
  • Version
    +關(guān)注

    關(guān)注

    0

    文章

    32

    瀏覽量

    7537

原文標題:并發(fā)場景下如何保證數(shù)據(jù)操作的準確性?

文章出處:【微信號:芋道源碼,微信公眾號:芋道源碼】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    系統(tǒng)快速、穩(wěn)定性和準確性之間的權(quán)衡

    衡量一個測控系統(tǒng)的好壞的標準主要在于該系統(tǒng)的快速、穩(wěn)定性和準確性,但一般常常會得此失彼,比如我要滿足系統(tǒng)準確性,可對一段時間采集的數(shù)據(jù)進行處理與分析,去除干擾信號,再得到一個
    發(fā)表于 07-28 11:42

    如何提高工程預(yù)算的準確性

    工程量。工程量的計算是編好施工圖預(yù)算的主要環(huán)節(jié),是整個預(yù)算編制過程中最繁雜的一個工序,用工時最多,出錯可能也最多,而工程量又是整個預(yù)算的主要數(shù)據(jù),是計算的基礎(chǔ),因此,一定要抓好工程量的準確性。
    發(fā)表于 07-25 17:35

    如何確認延時函數(shù)時間的準確性?

    如何確認延時函數(shù)時間的準確性?
    發(fā)表于 01-27 07:35

    如何提高投標報價編制的準確性

        施工企業(yè)要在激烈的市場競爭中戰(zhàn)勝對手,贏得工程項目,投標報價的準確性是關(guān)鍵。下面結(jié)合多年工作的實際,談一如何提高投標報價編制的準確性
    發(fā)表于 01-08 15:36 ?13次下載

    越南VNTA部署基于AI的射頻測試系統(tǒng),保證測試的準確性和一致

    由R&S BTC和RFSpark組成的自動化射頻測試系統(tǒng)可優(yōu)化人力資本投資,并保證測試的準確性和一致。
    的頭像 發(fā)表于 05-15 16:17 ?3596次閱讀

    保證雙法蘭液位計測量的準確性的方法

    為了保證雙法蘭液位計液位測量的準確性,必須首先保證容器內(nèi)氣相、液相介質(zhì)對差壓變送器高、低壓側(cè)作用壓力傳遞的準確性,從壓力作用的起點出發(fā),根據(jù)雙法蘭液位計的組成部分和工作原理來分析應(yīng)用中
    發(fā)表于 07-19 11:59 ?2260次閱讀

    了解電源監(jiān)視器的準確性

    了解電源監(jiān)視器的準確性
    發(fā)表于 04-18 08:46 ?0次下載
    了解電源監(jiān)視器的<b class='flag-5'>準確性</b>

    評估庫侖計數(shù)燃料計量系統(tǒng)的準確性

    數(shù)據(jù)必須準確,這一點很重要。如果沒有足夠準確的輸入數(shù)據(jù),肯定會導(dǎo)致測量精度差。從這個角度來看,了解燃油計量硬件本身的不準確性來源是有幫助的
    的頭像 發(fā)表于 03-07 15:45 ?1858次閱讀
    評估庫侖計數(shù)燃料計量系統(tǒng)的<b class='flag-5'>準確性</b>

    制造行業(yè)BOM如何保證準確性?

    制造行業(yè)BOM如何保證準確性:使用專業(yè)的BOM軟件可以幫助制造商創(chuàng)建準確的BOM。這種軟件不僅可以自動檢查錯誤,還可以輕松地更新和修改BOM。比如,彩虹企業(yè)圖紙管理軟件?,系統(tǒng)中...
    的頭像 發(fā)表于 03-27 11:02 ?945次閱讀
    制造行業(yè)BOM如何<b class='flag-5'>保證</b><b class='flag-5'>準確性</b>?

    怎樣測試電流探頭的準確性以及保證其精準

    隨著科技的不斷發(fā)展,電流探頭的應(yīng)用范圍越來越廣泛。在各種電子產(chǎn)品的設(shè)計和生產(chǎn)過程中,電流探頭的準確性對于檢測和測量電流顯得尤為重要。那么,怎樣測試電流探頭的準確性以及保證其精準呢?
    的頭像 發(fā)表于 12-14 10:49 ?548次閱讀
    怎樣測試電流探頭的<b class='flag-5'>準確性</b>以及<b class='flag-5'>保證</b>其精準<b class='flag-5'>性</b>

    8芯M16插頭數(shù)據(jù)傳輸?shù)?b class='flag-5'>準確性

      德索工程師說道8芯M16插頭作為高性能連接器,其數(shù)據(jù)傳輸?shù)?b class='flag-5'>準確性對于整個系統(tǒng)的穩(wěn)定性和可靠至關(guān)重要。以下是對8芯M16插頭數(shù)據(jù)傳輸準確性
    的頭像 發(fā)表于 06-14 18:06 ?275次閱讀
    8芯M16插頭<b class='flag-5'>數(shù)據(jù)</b>傳輸?shù)?b class='flag-5'>準確性</b>

    景區(qū)負氧離子監(jiān)測站的數(shù)據(jù)準確性如何?

    BK-FZ5景區(qū)負氧離子監(jiān)測站的數(shù)據(jù)準確性是評估其性能的重要指標之一,其準確性受到多個因素的影響。
    的頭像 發(fā)表于 07-31 14:41 ?232次閱讀
    景區(qū)負氧離子監(jiān)測站的<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>準確性</b>如何?

    影響電源紋波測試準確性的因素

    電源紋波測試是評估電源質(zhì)量的重要手段之一,它能夠反映出電源在輸出電壓中的波動情況。然而,測試過程中的多種因素都可能對測試結(jié)果的準確性產(chǎn)生影響。本文將從多個方面分析影響電源紋波測試準確性的因素,并提
    的頭像 發(fā)表于 08-02 09:42 ?464次閱讀

    如何保證測長機測量的準確性?

    可以通過以下方法保證測長機測量的準確性:一、設(shè)備方面1.定期校準按照規(guī)定的時間間隔,將測長機送往專業(yè)的計量機構(gòu)或使用標準器進行校準。校準可以確定測長機的測量誤差,并對其進行調(diào)整,確保測量結(jié)果的準確性
    的頭像 發(fā)表于 10-25 16:16 ?215次閱讀
    如何<b class='flag-5'>保證</b>測長機測量的<b class='flag-5'>準確性</b>?

    如何評估 ChatGPT 輸出內(nèi)容的準確性

    評估 ChatGPT 輸出內(nèi)容的準確性是一個復(fù)雜的過程,因為它涉及到多個因素,包括但不限于數(shù)據(jù)的質(zhì)量和多樣、模型的訓(xùn)練、上下文的理解、以及輸出內(nèi)容的邏輯一致。以下是一些評估 Cha
    的頭像 發(fā)表于 10-25 17:48 ?464次閱讀