溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶服務(wù)條款》

Mysql 高可用集群 ------ MHA

發(fā)布時(shí)間:2020-08-04 04:36:35 來(lái)源:網(wǎng)絡(luò) 閱讀:242 作者:wx5d8a05337d6b9 欄目:云計(jì)算

文章目錄

一、MHA 簡(jiǎn)介

二、部署 MHA

第一步:三臺(tái)主從服務(wù)器安裝 mysql

第二步:修改 mysql 的主配置文件:/etc/my.cnf ,注意三個(gè)服務(wù)器的 server-id 不能一樣

第三步:三個(gè)服務(wù)器啟動(dòng) mysql 服務(wù)

第四步:配置 Mysql 主從同步(一主兩從)

第五步:安裝 MHA

第六步:?jiǎn)?dòng) MHA

一、MHA 簡(jiǎn)介:

MHA(Master High Availability)

(1)目前在MySQL高可用方面是一個(gè)相對(duì)成熟的解決方案,它由日本DeNA公司youshimaton(現(xiàn)就職于Facebook公司)開發(fā),是一套優(yōu)秀的作為MySQL高可用性環(huán)境下故障切換和主從提升的高可用軟件。在MySQL故障切換過(guò)程中,MHA能做到在0~30秒之內(nèi)自動(dòng)完成數(shù)據(jù)庫(kù)的故障切換操作,并且在進(jìn)行故障切換的過(guò)程中,MHA能在最大程度上保證數(shù)據(jù)的一致性,以達(dá)到真正意義上的高可用。

(2)該軟件由兩部分組成:MHA Manager(管理節(jié)點(diǎn))和MHA Node(數(shù)據(jù)節(jié)點(diǎn))。MHA Manager可以單獨(dú)部署在一個(gè)獨(dú)立的機(jī)器上管理多個(gè)master-slave集群,也可以部署在一臺(tái)slave節(jié)點(diǎn)上。MHA Node運(yùn)行在每臺(tái)MySQL服務(wù)器上,MHA Manager會(huì)定時(shí)探測(cè)集群中的master節(jié)點(diǎn),當(dāng)master出現(xiàn)故障時(shí),它可以自動(dòng)將最新數(shù)據(jù)的slave提升為新的master,然后將所有其他的slave重新指向新的master。整個(gè)故障轉(zhuǎn)移過(guò)程對(duì)應(yīng)用程序完全透明。

(3)工作原理:

1、在MHA自動(dòng)故障切換過(guò)程中,MHA試圖從宕機(jī)的主服務(wù)器上保存二進(jìn)制日志,最大程度的保證數(shù)據(jù)的不丟失,但這并不總是可行的。例如,如果主服務(wù)器硬件故障或無(wú)法通過(guò)ssh訪問(wèn),MHA沒法保存二進(jìn)制日志,只進(jìn)行故障轉(zhuǎn)移而丟失了最新的數(shù)據(jù)。使用MySQL 5.5的半同步復(fù)制,可以大大降低數(shù)據(jù)丟失的風(fēng)險(xiǎn)。MHA可以與半同步復(fù)制結(jié)合起來(lái)。如果只有一個(gè)slave已經(jīng)收到了最新的二進(jìn)制日志,MHA可以將最新的二進(jìn)制日志應(yīng)用于其他所有的slave服務(wù)器上,因此可以保證所有節(jié)點(diǎn)的數(shù)據(jù)一致性。
2、順序:
從宕機(jī)崩潰的master保存二進(jìn)制日志事件(binlog events);
識(shí)別含有最新更新的slave;
應(yīng)用差異的中繼日志(relay log)到其他的slave;
應(yīng)用從master保存的二進(jìn)制日志事件(binlog events);
提升一個(gè)slave為新的master;
使其他的slave連接新的master進(jìn)行復(fù)制

二、部署 MHA:

角色 需要安裝的軟件包

master(192.168.220.131) mha4mysql-node

slave1 (192.168.220.140) mha4mysql-node

slave2(192.168.220.136) mha4mysql-node

manager (192.168.220.170) mha4mysql-manager、mha4mysql-node

(1)需求:

本案例要求通過(guò)MHA 監(jiān)控MySQL 數(shù)據(jù)庫(kù)在故障時(shí)進(jìn)行自動(dòng)切換,不影響業(yè)務(wù)。

(2)思路:

安裝MySQL數(shù)據(jù)庫(kù)
配置MySQL 一主兩從
安裝MHA軟件
配置無(wú)密碼認(rèn)證
配置MySQL、MHA 高可用
模擬 master 故障切換

(3)操作系統(tǒng):Cent0S7…6 版本, MHA版本是0.57版本

第一步:三臺(tái)主從服務(wù)器安裝 mysql
(MySQL版本請(qǐng)使用5.6.36;cmake版本請(qǐng)使用2.8.6),因?yàn)槿_(tái)安裝操作都一致,這邊演示在 master 上的安裝順序。
1、安裝編譯依賴包:

 yum -y install ncurses-devel gcc-c++ perl-Module-Install

2、安裝 gmake 編譯軟件(直接解壓,然后./configure,gmake && gmake install 就可以了)

3、安裝 Mysql 數(shù)據(jù)庫(kù):
解壓;
編譯:cmake \
-DCMAKE_INSTALL_PREFIX=/usr/local/mysql \
-DDEFAULT_CHARSET=utf8  \
-DDEFAULT_COLLATION=utf8_general_ci \
-DWITH_EXTRA_CHARSETS=all \
-DSYSCONFDIR=/etc
安裝:make && make install

4、創(chuàng)建mysql用戶,并授權(quán):
groupadd mysql
useradd -M -s /sbin/nologin mysql -g mysql
chown -R mysql.mysql /usr/local/mysql

5、設(shè)置環(huán)境變量:
cp support-files/my-default.cnf /etc/my.cnf
cp support-files/mysql.server /etc/rc.d/init.d/mysqld
chmod +x /etc/rc.d/init.d/mysqld
chkconfig --add mysqld
echo "PATH=$PATH:/usr/local/mysql/bin" >> /etc/profile
source /etc/profile   //使環(huán)境變量生效

第二步:修改 mysql 的主配置文件:/etc/my.cnf ,注意三臺(tái)服務(wù)器的 server-id 不能一樣

---配置主服務(wù)器:
vim /etc/my.cnf
[mysql]
server-id = 1
log_bin = master-bin
log-slave-updates = true

---配置從服務(wù)器1:
vim /etc/my.cnf
[mysql]
server-id = 2
log_bin = master-bin
relay-log = relay-log-bin
relay-log-index = slave-relay-bin.index

---配置從服務(wù)器2:
vim /etc/my.cnf
[mysql]
server-id = 3
log_bin = master-bin
relay-log = relay-log-bin
relay-log-index = slave-relay-bin.index

第三步:三臺(tái)服務(wù)器啟動(dòng) mysql 服務(wù)

(1)創(chuàng)建軟連接:
ln -s /usr/local/mysql/bin/mysql /usr/sbin/
ln -s /usr/local/mysql/bin/mysqlbinlog /usr/sbin/
(2)開啟服務(wù):
systemctl stop firewalld.service 
setenforce 0

/usr/local/mysql/bin/mysqld_safe --user=mysql &        //開啟服務(wù)
[root@s01 mysql-5.6.36]# netstat -natp | grep 3306    //查看端口是否正常開發(fā)
tcp6       0      0 :::3306                 :::*                    LISTEN      40105/mysqld     

第四步:配置 Mysql 主從同步(一主兩從)

(1)mysql 主從配置,注意授權(quán):
在所有數(shù)據(jù)庫(kù)節(jié)點(diǎn)上授權(quán)兩個(gè)用戶,一個(gè)是從庫(kù)同步使用的用戶 myslave ,密碼設(shè)為 “123” ; 另外一個(gè)是 manager 使用監(jiān)控用戶 mha,密碼設(shè)為 “manager” 。
mysql -uroot -p      //進(jìn)入數(shù)據(jù)庫(kù)

mysql> grant replication slave on *.* to 'myslave'@'192.168.220.%' identified by '123';
mysql> grant all privileges on *.* to 'mha'@'192.168.220.%' identified by 'manager';
mysql> flush privileges;  //刷新數(shù)據(jù)庫(kù)

下面三條視情況添加(理論上不需要),以主機(jī)名授權(quán)(MHA檢查時(shí)是通過(guò)主機(jī)名的形式):
mysql> grant all privileges on *.* to 'mha'@'master' identified by 'manager';
mysql> grant all privileges on *.* to 'mha'@'slave1' identified by 'manager';
mysql> grant all privileges on *.* to 'mha'@'slave2' identified by 'manager';
(2)在 Mysql 主服務(wù)器上查看二進(jìn)制文件和同步點(diǎn):
show master status;

Mysql 高可用集群 ------ MHA

(3)接下來(lái),在slave1 和slave2 上分別執(zhí)行同步:
slave1:
change master to master_host='192.168.220.131',master_user='myslave',master_password='123',master_log_file='master-bin.000001',master_log_pos=1215;

slave2:
change master to master_host='192.168.220.131',master_user='myslave',master_password='123',master_log_file='master-bin.000001',master_log_pos=1215;
1、在兩臺(tái)從服務(wù)器上開啟slave,查看 IO 和 SQL 線程是否都為 yes ,表示同步正常:
mysql> start slave;
mysql> show slave status\G;

Mysql 高可用集群 ------ MHA

2、必須設(shè)置兩個(gè)從服務(wù)器為只讀模式:
mysql> set global read_only=1;

第五步:安裝 MHA

(1)所有服務(wù)器上都必須安裝 MHA 依賴的環(huán)境包,首先安裝 epel 源:
yum install epel-release --nogpgcheck -y

yum install -y perl-DBD-MYSQL \
perl-Config-Tiny \
perl-Log-Dispatch \
perl-Parallel-ForkManager \
perl-ExtUtils-CBuilder \
perl-ExtUtils-MakeMaker \
perl-CPAN
(2)所有服務(wù)器上必須安裝 mode 組件,最后在 MHA-manager 節(jié)點(diǎn)上安裝 manager 組件,因?yàn)?manager 依賴 node 組件,下面都是在 master 上操作演示安裝 node組件。
1、安裝node組件(四臺(tái)服務(wù)器都需要):
tar zvxf mha4mysql-node-0.57.tar.gz -C /opt/
cd /opt/mha4mysql-node-0.57/
perl Makefile.PL 
make && make install

2、manager服務(wù)器上安裝 manager組件(這個(gè)只有manager服務(wù)器才需要):
tar zvxf mha4mysql-manager-0.57.tar.gz -C /opt/
cd /opt/mha4mysql-manager-0.57/
perl Makefile.PL
make && make install
(3)manager服務(wù)器安裝后在 usr/local/bin 目錄下面會(huì)生成幾個(gè)工具:

Mysql 高可用集群 ------ MHA

masterha_check_ssh:檢查 MHA 的SSH配置狀況;
masterha_check_repl:檢查 MYSQL 復(fù)制狀況;
masterha_manager:?jiǎn)?dòng) manager 的腳本;
masterha_check_status:檢查當(dāng)前 MHA 的運(yùn)行狀態(tài);
masterha_master_monitor:檢測(cè) master 是否宕機(jī);
masterha_master_switch :開始故障轉(zhuǎn)移 (自動(dòng)或者手動(dòng));
masterha_conf_host:添加或者刪除配置的 server 信息;
masterha_stop:關(guān)閉manager;.
(4)同時(shí),安裝node后也會(huì)在usr/local/bin 目錄下面會(huì)生成幾個(gè)工具(這些工具通常由 MHA manager 的腳本觸發(fā),無(wú)需人為操作):

Mysql 高可用集群 ------ MHA

apply_diff_relay_logs :識(shí)別差異的中繼日志事件并將其差異的事件應(yīng)用于其他的 slave;
save_binary_logs:保存和復(fù)制 master 的二進(jìn)制日志;
filter_mysqlbinlog :去除不必要的 ROLLBACK 事件 (MHA 已不再使用這個(gè)工具);
purge_relay_logs:清除中繼日志(不會(huì)阻塞 SQL 線程);
(5)配置無(wú)密碼認(rèn)證:
1、在 manager 上配置到所有數(shù)據(jù)庫(kù)節(jié)點(diǎn)的無(wú)密碼認(rèn)證:
ssh-keygen -t rsa  //因?yàn)槭菬o(wú)密碼登錄,所以這步一直回車即可(會(huì)出現(xiàn)密鑰)
ssh-copy-id 192.168.220.131
ssh-copy-id 192.168.220.140
ssh-copy-id 192.168.220.136
輸入“yes”;再輸入密碼即可

2、在 master 上配置到數(shù)據(jù)庫(kù)節(jié)點(diǎn)slave1 和slave2 的無(wú)密碼認(rèn)證:
ssh-keygen -t rsa
ssh-copy-id 192.168.220.140
ssh-copy-id 192.168.220.136
輸入“yes”;再輸入密碼即可

3、在 slave1 上配置到數(shù)據(jù)庫(kù)節(jié)點(diǎn)master 和slave2 的無(wú)密碼認(rèn)證:
ssh-keygen -t rsa
ssh-copy-id 192.168.220.131
ssh-copy-id 192.168.220.136
輸入“yes”;再輸入密碼即可

4、在 slave2 上配置到數(shù)據(jù)庫(kù)節(jié)點(diǎn)master 和slave1 的無(wú)密碼認(rèn)證:
ssh-keygen -t rsa
ssh-copy-id 192.168.220.131
ssh-copy-id 192.168.220.140
輸入“yes”;再輸入密碼即可
(6)配置 MHA:
1、在 manager 節(jié)點(diǎn)上復(fù)制相關(guān)腳本到 /usr/local/bin 目錄:
cp -ra /opt/mha4mysql-manager-0.57/samples/scripts/ /usr/local/bin/

ls scripts/
 master_ip_failover:自動(dòng)切換時(shí) VIP 管理的腳本;
 master_ip_online_change:在線切換時(shí) VIP 的管理;
 power_manager:故障發(fā)生后關(guān)閉主機(jī)的腳本;
 send_report:因故障切換后發(fā)送報(bào)警的腳本;

將自動(dòng)切換時(shí) VIP 管理的腳本復(fù)制到 /usr/local/bin/目錄下:
cp /usr/local/bin/scripts/master_ip_failover /usr/local/bin/
2、重新編寫 master_ip_failover 腳本:
vim /usr/local/bin/master_ip_failover

#!/usr/bin/env perl
use strict;
use warnings FATAL => 'all';

use Getopt::Long;

my (
$command, $ssh_user, $orig_master_host, $orig_master_ip,
$orig_master_port, $new_master_host, $new_master_ip, $new_master_port
);
#############################添加內(nèi)容部分#########################################
my $vip = '192.168.220.100';
my $brdc = '192.168.220.255';
my $ifdev = 'ens33';
my $key = '1';
my $ssh_start_vip = "/sbin/ifconfig ens33:$key $vip";
my $ssh_stop_vip = "/sbin/ifconfig ens33:$key down";
my $exit_code = 0;
#my $ssh_start_vip = "/usr/sbin/ip addr add $vip/24 brd $brdc dev $ifdev label $ifdev:$key;/usr/sbin/arping -q -A -c 1 -I $ifdev $vip;iptables -F;";
#my $ssh_stop_vip = "/usr/sbin/ip addr del $vip/24 dev $ifdev label $ifdev:$key";
##################################################################################
GetOptions(
'command=s' => \$command,
'ssh_user=s' => \$ssh_user,
'orig_master_host=s' => \$orig_master_host,
'orig_master_ip=s' => \$orig_master_ip,
'orig_master_port=i' => \$orig_master_port,
'new_master_host=s' => \$new_master_host,
'new_master_ip=s' => \$new_master_ip,
'new_master_port=i' => \$new_master_port,
);

exit &main();

sub main {

print "\n\nIN SCRIPT TEST====$ssh_stop_vip==$ssh_start_vip===\n\n";

if ( $command eq "stop" || $command eq "stopssh" ) {

my $exit_code = 1;
eval {
print "Disabling the VIP on old master: $orig_master_host \n";
&stop_vip();
$exit_code = 0;
};
if ($@) {
warn "Got Error: $@\n";
exit $exit_code;
}
exit $exit_code;
}
elsif ( $command eq "start" ) {

my $exit_code = 10;
eval {
print "Enabling the VIP - $vip on the new master - $new_master_host \n";
&start_vip();
$exit_code = 0;
};
if ($@) {
warn $@;
exit $exit_code;
}
exit $exit_code;
}
elsif ( $command eq "status" ) {
print "Checking the Status of the script.. OK \n";
exit 0;
}
else {
&usage();
exit 1;
}
}
sub start_vip() {
`ssh $ssh_user\@$new_master_host \" $ssh_start_vip \"`;
}

# A simple system call that disable the VIP on the old_master

sub stop_vip() {
`ssh $ssh_user\@$orig_master_host \" $ssh_stop_vip \"`;
}

sub usage {
print
"Usage: master_ip_failover --command=start|stop|stopssh|status --orig_master_host=host --orig_master_ip=ip --orig_master_port=port --new_master_host=host --new_master_ip=ip --new_master_port=port\n";
}
3、創(chuàng)建 MHA 軟件目錄并拷貝配置文件:
mkdir /etc/masterha
cp /opt/mha4mysql-manager-0.57/samples/conf/app1.cnf /etc/masterha/

編輯配置文件:
vim /etc/masterha/app1.cnf

[server default]
manager_log=/var/log/masterha/app1/manager.log
manager_workdir=/var/log/masterha/app1
master_binlog_dir=/usr/local/mysql/data
master_ip_failover_script=/usr/local/bin/master_ip_failover
master_ip_online_change_script=/usr/local/bin/master_ip_online_change
password=manager
remote_workdir=/tmp
repl_password=123
repl_user=myslave
secondary_check_script=/usr/local/bin/masterha_secondary_check -s 192.168.220.140 -s 192.168.220.136
shutdown_script=""
ssh_user=root
user=mha

[server1]
hostname=192.168.220.131
port=3306

[server2]
candidate_master=1
hostname=192.168.220.140
check_repl_delay=0
port=3306

[server3]
hostname=192.168.220.136
port=3306
(7)測(cè)試 ssh 無(wú)密碼認(rèn)證,如果正常最后都會(huì)輸出 successful:
masterha_check_ssh -conf=/etc/masterha/app1.cnf

Mysql 高可用集群 ------ MHA

 masterha_check_repl -conf=/etc/masterha/app1.cnf   //檢查健康狀態(tài)

Mysql 高可用集群 ------ MHA

(8)注意:第一次配置需要去 master 上手動(dòng)開啟虛擬 IP
/sbin/ifconfig ens33:1 192.168.220.100/24

第六步:?jiǎn)?dòng) MHA

(1)啟動(dòng) MHA:
 nohup masterha_manager --conf=/etc/masterha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/masterha/app1/manager.log 2>&1 &
(2)查看 MHA 狀態(tài),可以看到當(dāng)前的 master 是 mysql1 節(jié)點(diǎn):
 masterha_check_status --conf=/etc/masterha/app1.cnf

Mysql 高可用集群 ------ MHA

(3)故障模擬:
1、首先啟用監(jiān)控觀察日志記錄:
tailf /var/log/masterha/app1/manager.log
2、現(xiàn)在在主庫(kù)上關(guān)閉mysql 服務(wù):
pkill -9 mysql
可以看到從庫(kù)的狀態(tài),vip會(huì)切換到其中之一的從庫(kù)上:

Mysql 高可用集群 ------ MHA

此時(shí),客戶機(jī)也可以通過(guò)虛擬ip,連接上數(shù)據(jù)庫(kù):
 mysql -h 192.168.220.100 -u root -p
比如,現(xiàn)在在數(shù)據(jù)庫(kù)內(nèi)創(chuàng)建一個(gè)新庫(kù):

Mysql 高可用集群 ------ MHA

1、我們可以在成為新主庫(kù)的第一臺(tái)從服務(wù)器上,看見這個(gè)創(chuàng)建的新庫(kù):

Mysql 高可用集群 ------ MHA

2、同時(shí)由于主從同步部署的原因,第二臺(tái)從服務(wù)器上也可以看見這個(gè)新庫(kù):

Mysql 高可用集群 ------ MHA

向AI問(wèn)一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI