溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

mariadb 10 多源復(fù)制(Multi-source replication) 業(yè)務(wù)使用場景分析,及使用方法

發(fā)布時間:2020-08-09 23:26:14 來源:ITPUB博客 閱讀:145 作者:haoge0205 欄目:MySQL數(shù)據(jù)庫
mariadb 10 多源復(fù)制(Multi-source replication) 業(yè)務(wù)使用場景分析,及使用方法


官方mysql一個slave只能對應(yīng)一個master,mariadb 10開始支持多源復(fù)制,一個slave可以有多個master,分別從各自的master復(fù)制不同的DB。


這個特性可以用在OLAP環(huán)境中,傳統(tǒng)電商DB都是拆了再拆,分庫分表,sharding,而OLAP環(huán)境或者大數(shù)據(jù)平臺環(huán)境,通常需要各種數(shù)據(jù)的聚合,多個平臺多個DB數(shù)據(jù)的復(fù)合查詢,而這些數(shù)據(jù)分散在各個庫中,怎么辦了,當(dāng)然通過應(yīng)用程序可以實現(xiàn)聚合,但又沒有更簡單的方法,比如直接對各個server上的庫,進(jìn)行表字段的關(guān)聯(lián)了。Mysql沒有oracle的DBLINk的功能,而mysql雖然有federated引擎,但不太靠譜,而且麻煩,性能怎么樣不可預(yù)知。


這個時候,mariadb的多源復(fù)制功能的優(yōu)勢就體現(xiàn)出來了。直接把多個server的db,復(fù)制到同一個slave上,所有庫都有,想怎么關(guān)聯(lián)就怎么關(guān)聯(lián)。


其他使用場景:


兩個獨立的系統(tǒng),通過接口,比如restful api或者soap,進(jìn)行接口數(shù)據(jù)傳遞,經(jīng)常有兩邊通訊數(shù)據(jù)不一致的場景,怎么核查數(shù)據(jù)了。除了查接口日志,可以使用多源復(fù)制,直接寫sql關(guān)聯(lián)兩個庫的通訊數(shù)據(jù),到底是發(fā)送方傳遞數(shù)據(jù)還是接受方接收數(shù)據(jù)有問題,就很明顯了。
DBA可以在同一個DB SERVER上查數(shù),不用到各個server分別查數(shù)。
備份方便,集中在這臺多源復(fù)制slave上進(jìn)行備份,不用到各個server上去復(fù)制。
大數(shù)據(jù)抽數(shù),集中在一個DB 平臺上抽數(shù),不用分散到各個DB server上抽數(shù),當(dāng)然抽數(shù)多了,IO扛不住,上ssd或者pcie 卡吧。






下面講講使用方法,建議看mariadb 10 多源復(fù)制官方文檔吧,https://mariadb.com/kb/en/mariadb/mariadb-documentation/replication-cluster-multi-master/replication/multi-source-replication/




傳統(tǒng)復(fù)制模式改多源復(fù)制:


stop slave ,show slave status 查看停止位置
reset slave all;
change master 'conn_mall' to master_host='master ip',
MASTER_PORT=3306,master_user='', master_password='',
master_log_file='mysql-bin.000036', master_log_pos=189492612;
start slave 'conn_mall';
show all slaves status \G 或者show slave 'conn_mall' status \G
新增加一個復(fù)制源:


源端導(dǎo)出 mysqldump --master-data=2
slave端導(dǎo)入
change master 'conn_erp' to master_host='master ip',
MASTER_PORT=3306,master_user='', master_password='',
master_log_file='mysql-bin.000470', master_log_pos=215418341;
start slave 'conn_erp';
傳統(tǒng)復(fù)制模式-》多源復(fù)制的命令變化


reset slave -> reset slave 'conn_erp',多個連接源名字
start slave -> start slave 'connection_name' 或者start all slaves
show slave status -> show slave 'conn_mall' status,或者 show all slaves status查看所有的slave連接狀態(tài)
sql_slave_skip_couter -> stop slave 'connection_name',先指定連接源名稱 set @@default_master_connection='connection_name';然后再set global sql_slave_skip_counter=1;最后start slave 'connection_name'
多源復(fù)制環(huán)境下的replicate-... variables 變量問題


可以在my.cnf replicate_ignore_db 前添加conn連接串前綴,比如 main_connection.replicate_ignore_db=ignore_database
若不加前綴,就是忽略所有同名的數(shù)據(jù)庫,其他變量類推。


參考:http://segmentfault.com/a/1190000000607471
向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI