溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

MySQL中怎樣實現(xiàn)主從同步

發(fā)布時間:2021-08-13 14:35:55 來源:億速云 閱讀:156 作者:Leah 欄目:數(shù)據(jù)庫

這篇文章將為大家詳細(xì)講解有關(guān)MySQL中怎樣實現(xiàn)主從同步,文章內(nèi)容質(zhì)量較高,因此小編分享給大家做個參考,希望大家閱讀完這篇文章后對相關(guān)知識有一定的了解。

(1) statement : 記錄每一條更改數(shù)據(jù)的sql;

  • 優(yōu)點:binlog文件較小,節(jié)約I/O,性能較高。

  • 缺點:不是所有的數(shù)據(jù)更改都會寫入binlog文件中,尤其是使用MySQL中的一些特殊函數(shù)(如LOAD_FILE()、UUID()等)和一些不確定的語句操作,從而導(dǎo)致主從數(shù)據(jù)無法復(fù)制的問題。

(2) row : 不記錄sql,只記錄每行數(shù)據(jù)的更改細(xì)節(jié)

  • 優(yōu)點:詳細(xì)的記錄了每一行數(shù)據(jù)的更改細(xì)節(jié),這也意味著不會由于使用一些特殊函數(shù)或其他情況導(dǎo)致不能復(fù)制的問題。

  • 缺點:由于row格式記錄了每一行數(shù)據(jù)的更改細(xì)節(jié),會產(chǎn)生大量的binlog日志內(nèi)容,性能不佳,并且會增大主從同步延遲出現(xiàn)的幾率。

(3)  mixed:一般的語句修改使用statment格式保存binlog,如一些函數(shù),statement無法完成主從復(fù)制的操作,則采用row格式保存binlog,MySQL會根據(jù)執(zhí)行的每一條具體的sql語句來區(qū)分對待記錄的日志形式,也就是在Statement和Row之間選擇一種。

(二)binlog日志內(nèi)容

mysqlbinlog命令查看的內(nèi)容如下:

MySQL中怎樣實現(xiàn)主從同步

根據(jù)事件類型查看的binlog內(nèi)容:

MySQL中怎樣實現(xiàn)主從同步

(三)binlog事件類型

MySQL  binlog記錄的所有操作實際上都有對應(yīng)的事件類型的,譬如STATEMENT格式中的DML操作對應(yīng)的是QUERY_EVENT類型,ROW格式下的DML操作對應(yīng)的是ROWS_EVENT類型,如果想了解更多請參考官方文檔,有關(guān)binlog日志內(nèi)容不在這里過多贅述,簡單介紹一下是為了更好的理解主從復(fù)制的細(xì)節(jié),下面我們進(jìn)入正題。

四、MySQL主從復(fù)制原理

mysql主從復(fù)制需要三個線程,master(binlog dump thread)、slave(I/O thread 、SQL thread)。

master

(1)binlog  dump線程:當(dāng)主庫中有數(shù)據(jù)更新時,那么主庫就會根據(jù)按照設(shè)置的binlog格式,將此次更新的事件類型寫入到主庫的binlog文件中,此時主庫會創(chuàng)建log  dump線程通知slave有數(shù)據(jù)更新,當(dāng)I/O線程請求日志內(nèi)容時,會將此時的binlog名稱和當(dāng)前更新的位置同時傳給slave的I/O線程。

slave

(2)I/O線程:該線程會連接到master,向log dump線程請求一份指定binlog文件位置的副本,并將請求回來的binlog存到本地的relay  log中,relay log和binlog日志一樣也是記錄了數(shù)據(jù)更新的事件,它也是按照遞增后綴名的方式,產(chǎn)生多個relay log(  host_name-relay-bin.000001)文件,slave會使用一個index文件(  host_name-relay-bin.index)來追蹤當(dāng)前正在使用的relay log文件。

(3)SQL線程:該線程檢測到relay  log有更新后,會讀取并在本地做redo操作,將發(fā)生在主庫的事件在本地重新執(zhí)行一遍,來保證主從數(shù)據(jù)同步。此外,如果一個relay  log文件中的全部事件都執(zhí)行完畢,那么SQL線程會自動將該relay log 文件刪除掉。

下面是整個復(fù)制過程的原理圖:

MySQL中怎樣實現(xiàn)主從同步

四、主從同步延遲

mysql的主從復(fù)制都是單線程的操作,主庫對所有DDL和DML產(chǎn)生binlog,binlog是順序?qū)懀孕屎芨?,slave的I/O線程到主庫取日志,效率也比較高,但是,slave的SQL線程將主庫的DDL和DML操作在slave實施。DML和DDL的IO操作是隨即的,不是順序的,成本高很多,還可能存在slave上的其他查詢產(chǎn)生lock爭用的情況,由于SQL也是單線程的,所以一個DDL卡住了,需要執(zhí)行很長一段事件,后續(xù)的DDL線程會等待這個DDL執(zhí)行完畢之后才執(zhí)行,這就導(dǎo)致了延時。當(dāng)主庫的TPS并發(fā)較高時,產(chǎn)生的DDL數(shù)量超過slave一個sql線程所能承受的范圍,延時就產(chǎn)生了,除此之外,還有可能與slave的大型query語句產(chǎn)生了鎖等待導(dǎo)致。

由于主從同步延遲是客觀存在的,我們只能從我們自己的架構(gòu)上進(jìn)行設(shè)計, 盡量讓主庫的DDL快速執(zhí)行。下面列出幾種常見的解決方案:

  1. 業(yè)務(wù)的持久化層的實現(xiàn)采用分庫架構(gòu),mysql服務(wù)可平行擴(kuò)展,分散壓力。

  2. 服務(wù)的基礎(chǔ)架構(gòu)在業(yè)務(wù)和mysql之間加入memcache或者Redis的cache層。降低mysql的讀壓力;

  3. 使用比主庫更好的硬件設(shè)備作為slave;

  4. sync_binlog在slave端設(shè)置為0;

  5. –logs-slave-updates 從服務(wù)器從主服務(wù)器接收到的更新不記入它的二進(jìn)制日志。

  6. 禁用slave的binlog

關(guān)于MySQL中怎樣實現(xiàn)主從同步就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,可以學(xué)到更多知識。如果覺得文章不錯,可以把它分享出去讓更多的人看到。

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI