0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

MySQL主從復(fù)制原理詳解

阿銘linux ? 來源:阿銘linux ? 2023-02-06 10:27 ? 次閱讀

什么是主從復(fù)制

簡單講,MySQL主從復(fù)制就是數(shù)據(jù)寫入一臺服務(wù)器(主服務(wù)器)后,同時還會額外寫入另外的服務(wù)器(從服務(wù)器)。也就是說數(shù)據(jù)會寫多份,這樣做的目的主要有兩個:

1)備份數(shù)據(jù);

2)做負(fù)載均衡,對于寫來說沒有效果,但是對于讀是可以做到負(fù)載均衡的。

主從復(fù)制原理

22c8afbc-a528-11ed-bfe3-dac502259ad0.png

1)主上將所有變更事件記錄到binlog里

2)從發(fā)起請求連接主

3)主的binlog備份線程將binlog傳給從

4)從的I/O線程將binlog解析成自己的relay log

5)從的SQL線程根據(jù)relay log來執(zhí)行具體的SQL語句

MySQL主從復(fù)制是一個異步的復(fù)制過程,主庫發(fā)送更新事件到從庫,從庫讀取更新記錄,并執(zhí)行更新記錄,使得從庫的內(nèi)容與主庫保持一致。

概念解釋

Binlog:binary log,主庫中保存所有更新事件日志的二進制文件。binlog是數(shù)據(jù)庫服務(wù)啟動的一刻起,保存數(shù)據(jù)庫所有變更記錄(數(shù)據(jù)庫結(jié)構(gòu)和內(nèi)容)的文件。在主庫中,只要有更新事件出現(xiàn),就會被依次地寫入到binlog中,之后會推送到從庫中作為從庫進行復(fù)制的數(shù)據(jù)源。

Binlog dump線程:每當(dāng)有從庫連接到主庫的時候,主庫都會創(chuàng)建一個線程然后發(fā)送binlog內(nèi)容到從庫。對于每一個即將發(fā)送給從庫的sql事件,binlog dump線程會將其鎖住。一旦該事件被線程讀取完之后,該鎖會被釋放,即使在該事件完全發(fā)送到從庫的時候,該鎖也會被釋放。

在從庫中,當(dāng)復(fù)制開始時,從庫就會創(chuàng)建從庫I/O線程和從庫的SQL線程進行復(fù)制處理。

從庫I/O線程:當(dāng)START SLAVE語句在從庫開始執(zhí)行之后,從庫創(chuàng)建一個I/O線程,該線程連接到主庫并請求主庫發(fā)送binlog里面的更新記錄到從庫上。從庫I/O線程讀取主庫的binlog輸出線程發(fā)送的更新并拷貝這些更新到本地文件,其中包括relay log文件。

從庫的SQL線程:從庫創(chuàng)建一個SQL線程,這個線程讀取從庫I/O線程寫到relay log的更新事件并執(zhí)行。

基于GTID的主從復(fù)制

1)什么是GTID

GTID(Global Transaction ID)是對于一個已提交事務(wù)的編號,并且是一個全局唯一的編號。GTID實際上是由UUID+TID組成的。其中UUID是一個MySQL實例的唯一標(biāo)識,保存在mysql數(shù)據(jù)目錄下的auto.cnf文件里。TID代表了該實例上已經(jīng)提交的事務(wù)數(shù)量,并且隨著事務(wù)提交單調(diào)遞增。下面是一個GTID的具體形式:3E11FA47-71CA-11E1-9E33-C80AA9429562:23

2)GTID的作用

根據(jù)GTID可以知道事務(wù)最初是在哪個實例上提交的,GTID的存在方便了Replication的Failover(故障切換)

3)GTID比傳統(tǒng)復(fù)制的優(yōu)勢

更簡單的實現(xiàn)failover,不用以前那樣在需要找log_file和log_Pos。更簡單的搭建主從復(fù)制。比傳統(tǒng)復(fù)制更加安全。GTID是連續(xù)沒有空洞的,因此主從庫出現(xiàn)數(shù)據(jù)沖突時,可以用添加空事物的方式進行跳過。

4)GTID的工作原理

① master更新數(shù)據(jù)時,會在事務(wù)前產(chǎn)生GTID,一同記錄到binlog日志中。

② slave端的i/o線程將變更的binlog,寫入到本地的relay log中。

③ sql線程從relay log中獲取GTID,然后對比slave端的binlog是否有記錄。

④ 如果有記錄,說明該GTID的事務(wù)已經(jīng)執(zhí)行,slave會忽略。

⑤ 如果沒有記錄,slave就會從relay log中執(zhí)行該GTID的事務(wù),并記錄到binlog。

⑥ 在解析過程中會判斷是否有主鍵,如果有就用二級索引,如果沒有就用全部掃描。

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 服務(wù)器
    +關(guān)注

    關(guān)注

    12

    文章

    8958

    瀏覽量

    85085
  • SQL
    SQL
    +關(guān)注

    關(guān)注

    1

    文章

    753

    瀏覽量

    44032
  • MySQL
    +關(guān)注

    關(guān)注

    1

    文章

    797

    瀏覽量

    26399
  • 線程
    +關(guān)注

    關(guān)注

    0

    文章

    503

    瀏覽量

    19636
  • binlog
    +關(guān)注

    關(guān)注

    0

    文章

    6

    瀏覽量

    1243

原文標(biāo)題:MySQL主從復(fù)制原理

文章出處:【微信號:aming_linux,微信公眾號:阿銘linux】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    Mysql如何實現(xiàn)雙向互為主從復(fù)制

    機器上得到的偏移量如果是基于GTID的主從復(fù)制 不用找binglog 和pos點master_auto_position=1;#加上這個參數(shù)就可以
    發(fā)表于 06-22 17:48

    基于二進制安裝MySQL主從復(fù)制

    二進制安裝MySQL實現(xiàn)主從復(fù)制
    發(fā)表于 03-10 09:43

    mysql主從復(fù)制

    mysql 主從復(fù)制
    發(fā)表于 04-28 14:30

    基于mycat的Mysql主從復(fù)制讀寫分離全攻略

    基于mycat的Mysql主從復(fù)制讀寫分離全攻略
    發(fā)表于 09-08 10:10 ?4次下載
    基于mycat的<b class='flag-5'>Mysql</b><b class='flag-5'>主從復(fù)制</b>讀寫分離全攻略

    利用MySQL進行一主一從的主從復(fù)制

    本文講述了如何使用MyBatisPlus+ShardingSphereJDBC進行讀寫分離,以及利用MySQL進行一主一從的主從復(fù)制。
    的頭像 發(fā)表于 07-28 09:47 ?995次閱讀

    一個操作把MySQL主從復(fù)制整崩了

    最近公司某項目上反饋mysql主從復(fù)制失敗,被運維部門記了一次大過,影響到了項目的驗收推進,那么究竟是什么原因?qū)е碌哪兀慷?b class='flag-5'>主從復(fù)制的原理又是什么呢?本文就對排查分析的過程做一個記錄。
    的頭像 發(fā)表于 05-11 11:14 ?514次閱讀
    一個操作把<b class='flag-5'>MySQL</b><b class='flag-5'>主從復(fù)制</b>整崩了

    聊聊RocketMQ的主從復(fù)制

    RocketMQ 主從復(fù)制是 RocketMQ 高可用機制之一,數(shù)據(jù)可以從主節(jié)點復(fù)制到一個或多個從節(jié)點。
    的頭像 發(fā)表于 07-04 09:42 ?577次閱讀
    聊聊RocketMQ的<b class='flag-5'>主從復(fù)制</b>

    什么是Redis主從復(fù)制

    Redis主從復(fù)制 來自靈魂的拷問:什么是Redis主從復(fù)制? 簡言之就是: 主對外從對內(nèi),主可寫從不可寫 主掛了,從不可為主 看下面的圖加深下理解: 對,你沒看錯,Redis主從復(fù)制沒有動態(tài)選舉
    的頭像 發(fā)表于 10-09 15:09 ?391次閱讀
    什么是Redis<b class='flag-5'>主從復(fù)制</b>

    mysql主從復(fù)制三種模式

    MySQL主從復(fù)制是一種常見的數(shù)據(jù)同步方式,它可以實現(xiàn)將一個數(shù)據(jù)庫的更改同步到其他多個數(shù)據(jù)庫的功能。主從復(fù)制可以提高數(shù)據(jù)庫的可用性和性能,以及提供故障恢復(fù)和數(shù)據(jù)備份的支持。在MySQL
    的頭像 發(fā)表于 11-16 14:04 ?1407次閱讀

    mysql如何實現(xiàn)主從復(fù)制的具體流程

    主從復(fù)制MySQL數(shù)據(jù)庫中常用的數(shù)據(jù)復(fù)制技術(shù)之一,它的主要目的是將一個數(shù)據(jù)庫服務(wù)器上的數(shù)據(jù)復(fù)制到其他服務(wù)器上,以實現(xiàn)數(shù)據(jù)的備份、高可用和分布式部署。下面將詳細介紹
    的頭像 發(fā)表于 11-16 14:10 ?735次閱讀

    mysql主從復(fù)制主要有幾種模式

    MySQL主從復(fù)制MySQL數(shù)據(jù)庫中常用的一種數(shù)據(jù)復(fù)制方式,用于實現(xiàn)數(shù)據(jù)的備份、負(fù)載均衡、故障恢復(fù)等目的。主從復(fù)制主要有以下幾種模式: 異
    的頭像 發(fā)表于 11-16 14:15 ?1124次閱讀

    mysql主從復(fù)制的原理

    MySQL主從復(fù)制是一種數(shù)據(jù)庫復(fù)制技術(shù),它允許將一個MySQL數(shù)據(jù)庫的更新操作自動復(fù)制到其他MySQL
    的頭像 發(fā)表于 11-16 14:18 ?454次閱讀

    mysql主從復(fù)制 混合類型的復(fù)制

    MySQL主從復(fù)制是一種常用的數(shù)據(jù)復(fù)制技術(shù),可以實現(xiàn)數(shù)據(jù)從一個MySQL服務(wù)器(主服務(wù)器)復(fù)制到另一個M
    的頭像 發(fā)表于 11-16 14:20 ?517次閱讀

    mysql主從復(fù)制數(shù)據(jù)不一致怎么辦

    MySQL主從復(fù)制是一種常用的數(shù)據(jù)復(fù)制技術(shù),用于實現(xiàn)數(shù)據(jù)的實時同步和分布式部署。然而,在實際應(yīng)用中,主從復(fù)制過程中出現(xiàn)數(shù)據(jù)不一致的情況也是很常見的。本文將從以下幾個方面介紹
    的頭像 發(fā)表于 11-16 14:35 ?2212次閱讀

    配置MySQL主從復(fù)制和讀寫分離

    配置MySQL主從復(fù)制和讀寫分離
    的頭像 發(fā)表于 10-23 11:44 ?247次閱讀
    配置<b class='flag-5'>MySQL</b><b class='flag-5'>主從復(fù)制</b>和讀寫分離