MySQL的物理備份lvm-snapshot具體是指什么

本篇文章給大家主要講的是關(guān)于MySQL的物理備份lvm-snapshot具體是指什么的內(nèi)容，感興趣的話就一起來看看這篇文章吧，相信看完MySQL的物理備份lvm-snapshot具體是指什么對大家多少有點參考價值吧。                                                          

lvm-snapshot（工具備份）

優(yōu)點：

• 幾乎是熱備（穿件快照前把表上鎖，創(chuàng)建完成后立即釋放）

• 支持所有引擎

• 備份速度快

• 無需使用昂貴的商業(yè)軟件（它是操作系統(tǒng)級別的）

缺點：

• 可能需要跨部門協(xié)作（使用操作系統(tǒng)級別的命令，DBA一般沒有權(quán)限）

• 無法預計服務(wù)停止時間

• 數(shù)據(jù)如果分布在多個卷上比較麻煩（針對存儲級別而言）

邏輯卷快照的原理

為什么選擇lvm快照備份？

原因：因為鎖表的時間不一致，在鎖表的瞬間是不能寫入的，對其進行快照備份，備份完成后立即解鎖，然后服務(wù)可以正常使用（寫入等操作）比如數(shù)據(jù)量大的時候，做快照一下子就拍了，然后立即解鎖，就不影響寫入等操作。如果用mysqldump備份，那么數(shù)據(jù)量大的時候，鎖表時間長，就會影響效率。

操作流程

1、flush table with read locak;   
2、create snapshot  
3、show master status;　show slave status; [可選]
4、unlock tables;
5、Copy files from the snapshot
6、Unmount the snapshot. 
7、Remove snapshot

快照備份：
1.遷移數(shù)據(jù)到邏輯卷（不是必須，視情況而定）
2.鎖表（時間）
3.給數(shù)據(jù)庫所在的邏輯卷拍快照
4.解鎖
5.將快照掛載到臨時掛載點上
6.將快照上的所有數(shù)據(jù)拷貝到相應(yīng)的備份目錄里（不同主機）
7.卸載快照并刪除

lvm備份示例

一、數(shù)據(jù)遷移到邏輯卷上

環(huán)境：數(shù)據(jù)文件不在邏輯卷上，那么需要將數(shù)據(jù)文件遷移到邏輯卷上

• 1、創(chuàng)建一個邏輯卷

[root@Admin ~]# pvcreate /dev/sdb
[root@Admin ~]# vgcreate vg01 /dev/sdb
[root@Admin ~]# lvcreate -n lv_mysql -L 4G vg01
[root@Admin ~]# mkfs.ext4 /dev/mapper/vg01-lv_mysql

• 2、將當前的mysql數(shù)據(jù)庫遷移到邏輯卷上

1>先停止應(yīng)用
2>停止mysql服務(wù)
[root@Admin ~]# service mysqld stop
3>備份所有的數(shù)據(jù)文件到指定的地方
[root@Admin ~]# tar -czvf /tmp/backmysql/mysql.tar.gz /data/DB/*
4>掛載邏輯卷到當前mysql的數(shù)據(jù)目錄里
[root@Admin ~]# mount /dev/mapper/vg01-lv_mysql /data/DB/
5>將剛剛備份的數(shù)據(jù)解壓到數(shù)據(jù)目錄里
[root@Admin ~]# tar xf /tmp/backmysql/mysql.tar.gz -C /data/DB/
[root@Admin ~]# mv /data/DB/data/DB/* /data/DB/ && rm -rf /data/DB/data/
6>啟動數(shù)據(jù)庫
[root@Admin ~]# service mysqld start
此處啟動失敗原因/data/DB/數(shù)據(jù)目錄的權(quán)限變成了root，
更改權(quán)限重新啟動
[root@Admin ~]# chown mysql. -R /data/DB/ && service mysqld start

二、快照備份數(shù)據(jù)庫

• 1、給數(shù)據(jù)庫加讀鎖

mysql> flush table with read lock;

• 2、給mysql的數(shù)據(jù)庫所在的邏輯卷創(chuàng)建快照

[root@Admin ~]# lvcreate -n lv_mysql_s -L 50M -s /dev/vg01/lv_mysql
[root@Admin ~]# dmsetup --tree ls
vg01-lv_mysql (253:0)
 └─vg01-lv_mysql-real (253:1)
    └─ (8:16)
vg01-lv_mysql_s (253:3)
 ├─vg01-lv_mysql_s-cow (253:2)
 │  └─ (8:16)
 └─vg01-lv_mysql-real (253:1)
    └─ (8:16)

• 3、解鎖數(shù)據(jù)庫

[root@Admin ~]# unlock tables

• 上面1~3步可以合并為一步

[root@Admin ~]# echo "flush tables with read lock; system lvcreate -n lv_mysql_s -L 50M -s /dev/vg01/lv_mysql;unlock tables;" |mysql -p123

• 4、將快照掛載到臨時目錄里

[root@Admin ~]# mkdir /mnt/mysql && mount /dev/vg01/lv_mysql_s /mnt/mysql/

• 5、備份數(shù)據(jù)

[root@Admin ~]# ls /mnt/mysql/    # 可以看到新的掛載目錄里面的數(shù)據(jù)
Admin.pid  db01     ib_logfile0  mysql             mysql-bin.000003  mysql-bin.000006  mysql-bin.000009  performance_schema
auto.cnf   db02     ib_logfile1  mysql-bin.000001  mysql-bin.000004  mysql-bin.000007  mysql-bin.000010  test
binlog     ibdata1  login        mysql-bin.000002  mysql-bin.000005  mysql-bin.000008  mysql-bin.index
[root@Admin ~]# mkdir /backup && rsync -av /mnt/mysql /backup

• 6、卸載快照并刪除

[root@Admin ~]# umount /mnt/mysql/ && lvremove /dev/vg01/lv_mysql_s

• 7、測試驗證（將數(shù)據(jù)目錄里面的東西全部刪除）然后再將備份的數(shù)據(jù)目錄恢復過來

    1>我們來點狠的，直接把mysql的數(shù)據(jù)目錄/data/DB/刪除。
    [root@Admin ~]# rm -rf /data/DB/* && ls /data/DB/
    2>刪除后可以看到重啟mysql直接報錯了
    [root@Admin ~]# service mysqld restart 
    MySQL server PID file could not be found!                  [失敗]
    Starting MySQL...The server quit without updating PID file [失敗]/DB/Admin.pid).
    3>根據(jù)上面的/backup里面?zhèn)浞莸臄?shù)據(jù)進行恢復
    [root@Admin ~]# mv /backup/mysql/* /data/DB/
    [root@Admin ~]# ls /data/DB/
    auto.cnf  db02         ib_logfile1  mysql-bin.000001  mysql-bin.000004  mysql-bin.000007  mysql-bin.000010    test
    binlog    ibdata1      login        mysql-bin.000002  mysql-bin.000005  mysql-bin.000008  mysql-bin.index
    db01      ib_logfile0  mysql        mysql-bin.000003  mysql-bin.000006  mysql-bin.000009  performance_schema
    4>重新啟動
    [root@Admin ~]# chown mysql. /data/DB/ -R 
    [root@Admin ~]# service mysqld restart
    這里權(quán)限更改了如果啟動還是報錯的話，查看下是否mysql進程還存在，如果存在，將其kill掉再重啟就OK
    [root@Admin ~]# mysql -p123
    mysql> show databases;
    +--------------------+
    | Database           |
    +--------------------+
    | information_schema |
    | binlog             |
    | db01               |
    | db02               |
    | login              |
    | mysql              |
    | performance_schema |
    | test               |
    +--------------------+
rows in set (0.00 sec)

將上面?zhèn)浞菡頌槟_本 + Crontab 計劃任務(wù)定時完成備份

#!/bin/bash
#LVM BackMysql
back_dir=/backup/`date +%F`
[ -d $back_dir ]  mkdir -p $back_dir
echo "flush tables with read lock; system lvcreate -n lv_mysql_s -L 50M -s /dev/vg01/lv_mysql;unlock tables;" |mysql -p123
mount /dev/vg01/lv_mysql_s /mnt/mysql/
rsync -a /mnt/mysql/ $back_dir
if [ $? -eq 0 ];then
    umount /mnt/mysql/ && lvremove -f /dev/vg01/lv_mysql_s
fi

自動化實現(xiàn)快照備份mylvmbackup

1、安裝相應(yīng)的軟件

2、兩種備份方式

　　1>mylvmbackup    xxx終端備份

　　2>修改配置文件指定相應(yīng)的參數(shù)

正常安裝MySQL：
1. 安裝系統(tǒng)
2. 準備LVM，例如 /dev/vg_back/lv-mysql，mount /usr/local/mysql
3. 源碼安裝MySQL到 /usr/local/mysql

可選操作：　將現(xiàn)在的數(shù)據(jù)遷移到LVM
1. 準備lvm及文件系統(tǒng)
# lvcreate -L 2G -n lv-mysql vg_back
# mkfs.ext4 /dev/vg_back/lv-mysql
 
2. 將數(shù)據(jù)遷移到LVM
# service mysqld stop
# mount /dev/vg_back/lv-mysql /u01/ //臨時掛載點
# rsync -va /usr/local/mysql/ /u01/ //將MySQL原數(shù)據(jù)鏡像到臨時掛載點

# umount /u01/
# mount /dev/vg_back/lv-mysql /usr/local/mysql //加入fstab開機掛載
# df -Th
/dev/mapper/vg_back-lv-mysql ext4 2.0G 274M 1.7G 15% /usr/local/mysql
# service mysqld start

手動基于LVM快照實現(xiàn)備份：
1. 加鎖
mysql> flush table with read lock;

2.創(chuàng)建快照
# lvcreate -L 500M -s -n lv-mysql-snap /dev/vg_back/lv-mysql
# mysql -uroot -p123 -e 'show master status' > /backup/`date +%F`_position.txt
或者
mysql> show master status;
+-------------------+----------+--------------+------------------+-------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+-------------------+----------+--------------+------------------+-------------------+
| mysqld-bin.00003 | 135 | | | |
+-------------------+----------+--------------+------------------+-------------------+

3. 釋放鎖
mysql> unlock tables;

4. 從快照中備份
# mount -o ro /dev/vg_back/lv-mysql-snap /u01/
# mkdir /backup/`date +%F`
# rsync -a /u01/ /backup/2015-07-02/

5. 移除快照
# umount /u01/
# lvremove -f /dev/vg_back/lv-mysql-snap

腳本 + Cron完成：
#!/bin/bash
#LVM backmysql...
back_dir=/backup/`date +%F`

[ -d $back_dir ] || mkdir -p $back_dir

mysql -uroot -p123 -e 'flush table with read lock'
lvcreate -L 500M -s -n lv-mysql-snap /dev/vg_back/lv-mysql
mysql -uroot -p123 -e 'show master status' |grep mysql > $back_dir/position.txt
mysql -uroot -p123 -e 'flush logs'
mysql -uroot -p123 -e 'unlock tables'

mount -o ro /dev/vg_back/lv-mysql-snap /u01

rsync -a /u01/ $back_dir

if [ $? -eq 0 ];then
umount /u01/
lvremove -f /dev/vg_back/lv-mysql-snap
fi
===============================================================
mylvmbackup

功能：利用LVM快照實現(xiàn)物理備份，即LVM快照備份的自動版

安裝perl模塊
1. 在線安裝
http://www.lenzg.net/mylvmbackup
它依賴于perl 模塊，可用以下命令安裝
perl -MCPAN -e 'install Config::IniFiles'

2. 離線安裝
# rpm -ivh mylvmbackup-0.16-0.noarch.rpm
warning: mylvmbackup-0.16-0.noarch.rpm: Header V4 DSA/SHA1 Signature, key ID b27291f2: NOKEY
error: Failed dependencies:
perl(Config::IniFiles) is needed by mylvmbackup-0.16-0.noarch
perl(Date::Format) is needed by mylvmbackup-0.16-0.noarch
perl(File::Copy::Recursive) is needed by mylvmbackup-0.16-0.noarch

解決：
# yum -y localinstall atrpms-77-1.noarch.rpm perl-File-Copy-Recursive-0.38-1.el6.rfx.noarch.rpm perl-IO-stringy-2.110-1.2.el6.rfx.noarch.rpm perl-Config-IniFiles-2.56-1.el6.rf.noarch.rpm

安裝mylvmbackup軟件包
# yum -y install mylvmbackup-0.15-0.noarch.rpm 解決依賴關(guān)系perl-TimeDate

備份方法一：
# mylvmbackup --user=root --password=123 --host=localhost --mycnf=/etc/my.cnf --vgname=vg_back --lvname=lv-mysql --backuptype=tar --lvsize=100M --backupdir=/backup

# tar xf backup-20140903_000236_mysql.tar.gz
# ls
backup backup-cnf-20150702_000236_mysql
backup-20150702_000236_mysql.tar.gz backup-pos

備份方法二：
# vim /etc/mylvmbackup.conf
[mysql] #連接數(shù)據(jù)庫配置
user=root
password=123456
host=localhost
port=3306
socket=/tmp/mysql.sock
mycnf=/etc/my.cnf
[lvm] #LVM邏輯卷的配置
vgname=vg_server #卷組名稱
lvname=lv_mysql #邏輯卷名稱
backuplv=mysql_snap #快照卷名稱
lvsize=500M
[fs] #文件系統(tǒng)配置
xfs=0
mountdir=/var/tmp/mylvmbackup/mnt/ #掛載目錄
backupdir=/backup #備份目錄，也可以備份到行程主機
[misc] #定義備份選項
backuptype=tar #定義備份的類型
backupretention=0
prefix=backup #定義備份文件名前綴
suffix=_mysql #定義備份文件名后綴
tararg=cvf #定義tar參數(shù)，默認為cvf
tarfilesuffix=.tar.gz #定義備份文件后綴名格式
datefmt=%Y%m%d_%H%M%S #定義備份文件名時間戳格式
keep_snapshot=0 #是否保留snaphot
keep_mount=0 #是否卸載snaphot
quiet=0 #定義記錄日志類型
注釋：其他配置保持輸入即可

然后直接執(zhí)行mylvmbackup即可

mylvmbackup 參考示例

以上關(guān)于MySQL的物理備份lvm-snapshot具體是指什么詳細內(nèi)容，對大家有幫助嗎？如果想要了解更多相關(guān)，可以繼續(xù)關(guān)注我們的行業(yè)資訊板塊。