mysql 自動自動化增量備份及恢復(fù)

1.1數(shù)據(jù)庫備份工具

Percona XtraBackup

官方地址:https://www.percona.com/software/mysql-database/percona-xtrabackup

1.2工具的安裝

#安裝

[root@localhost ~]# cd /opt/

[root@localhost opt]# wget?https://www.percona.com/downloads/XtraBackup/Percona-XtraBackup-2.4.5/binary/redhat/6/x86_64/percona-xtrabackup-24-2.4.5-1.el6.x86_64.rpm

[root@localhost opt]# yum installpercona-xtrabackup-24-2.4.5-1.el6.x86_64.rpm

#如果提示缺失依賴包

[root@localhost opt]# yum -y install perlperl-devel libaio libaio-devel perl-Time-HiRes perl-DBD-MySQL

#如果報(bào)錯如下:

postfix-2.10.1-6.el7.x86_64有缺少的需求libmysqlclient.so.18()(64bit)

則需要安裝相關(guān)依賴,檢查系統(tǒng)mysql版本:

[root@localhost opt]# mysql

Welcome to the MySQL monitor.Commands end with ; or \g.

Your MySQL connection id is 7

Server version: 5.7.15-log MySQL CommunityServer (GPL)

#下載依賴軟件包

[root@localhost opt]# wgethttp://dev.mysql.com/get/Downloads/MySQL-5.7/mysql-5.7.15-1.el7.x86_64.rpm-bundle.tar

#解壓縮并安裝mysql-community-libs-compat-5.7.15-1.el7.x86_64.rpm

[root@localhost opt]# mkdir -p mysql

[root@localhost opt]# cd mysql/

[root@localhost opt]# mvmysql-5.7.15-1.el7.x86_64.rpm-bundle.tar mysql/

[root@localhost mysql]# tar -xvfmysql-5.7.15-1.el7.x86_64.rpm-bundle.tar

[root@localhost mysql]# yum installmysql-community-libs-compat-5.7.15-1.el7.x86_64.rpm

1.3工具的配置

Xtrabackup常用參數(shù)

--user=USER指定備份用戶,不指定的話為當(dāng)前系統(tǒng)用戶

--password=PASSWD指定備份用戶密碼

--port=PORT指定數(shù)據(jù)庫端口

--defaults-group=GROUP-NAME在多實(shí)例的時候使用

--host=HOST指定備份的主機(jī),可以為遠(yuǎn)程數(shù)據(jù)庫服務(wù)器

--apply-log回滾日志

--database指定需要備份的數(shù)據(jù)庫,多個數(shù)據(jù)庫之間以空格分開

--defaults-file指定mysql的配置文件

--copy-back將備份數(shù)據(jù)復(fù)制回原始位置

--incremental增量備份,后面跟要增量備份的路徑

--incremental-basedir=DIRECTORY增量備份時使用指向上一次的增量備份所在的目錄

--incremental-dir=DIRECTORY增量備份還原的時候用來合并增量備份到全量,用來指定全備路徑

--redo-only對增量備份進(jìn)行合并

--rsync加快本地文件傳輸,適用于non-InnoDB數(shù)據(jù)庫引擎。不與--stream共用

--safe-slave-backup

--no-timestamp生成的備份文件不以時間戳為目錄.

1.4備份及恢復(fù)策略

增量備份從庫到其他服務(wù)器;

若主庫掛而從庫正常,則將主線數(shù)據(jù)請求切到從庫,嘗試恢復(fù)主庫;

若主從都掛,則從備份服務(wù)器將數(shù)據(jù)恢復(fù)到從庫,再將主線數(shù)據(jù)請求切到從庫,之后嘗試恢復(fù)主庫,或者直接啟用遠(yuǎn)程臨時庫(要考慮集群恢復(fù)后遠(yuǎn)程臨時庫將變更為真正的數(shù)據(jù)源,實(shí)時數(shù)據(jù)如何恢復(fù)到集群的問題?。?/p>

1.5全量備份及恢復(fù)

#全量備份及恢復(fù)

[root@localhost opt]# innobackupex--user=root --password=dianzhong /data/backup/full

#上個命令在我的/data/backup/full/目錄生成了一個文件夾【2017-10-16_11-57-01】

#一般情況下,這個備份不能用于恢復(fù),因?yàn)閭浞莸臄?shù)據(jù)中可能會包含尚未提交的事務(wù)或已經(jīng)提交但尚未同步至數(shù)據(jù)文件中的事務(wù),此時數(shù)據(jù)文件處于不一致的狀態(tài)

#因此,我們現(xiàn)在就是要通過回滾未提交的事務(wù)及同步已經(jīng)提交的事務(wù)至數(shù)據(jù)文件也使得數(shù)據(jù)文件處于一致性狀態(tài)。

innobackupex --user=root --password--defaults-file=/data/mysql/my.cnf --apply-log /data/backup/full/2017-10-16_11-57-01

#恢復(fù)操作演練

#關(guān)掉服務(wù),遷移已有的數(shù)據(jù)目錄

service mysqld stop

mv /data/mysql /data/mysqlold

mkdir -p /data/mysql

#執(zhí)行innobackupex恢復(fù)命令

innobackupex--defaults-file=/etc/my.cnf --user=root --password=dianzhong --copy-back/data/backup/full/2017-10-16_11-57-01

#對新目錄執(zhí)行賦權(quán)操作,此操作需在innobackupex恢復(fù)命令后

chown -R mysql.mysql /data/mysql

#重啟服務(wù),并檢查數(shù)據(jù)是否恢復(fù)

service mysqld start

1.6增量備份及恢復(fù)

#全量備份

innobackupex--defaults-file=/data/mysql/my.cnf--user=root --password=passwd/data/backup/full

#第一次增量備份

innobackupex --defaults-file=/etc/my.cnf--user=root --password=dianzhong --incremental /data/backup/inc1--incremental-basedir=/data/backup/full/2017-10-16_11-57-01

# --incremental-basedir指的是完全備份所在的目錄

#此命令執(zhí)行結(jié)束后,innobackupex命令會在/data/backup目錄中創(chuàng)建一個新的以時間命名的目錄以存放所有的增量備份數(shù)據(jù)。

#另外,在執(zhí)行過增量備份之后再一次進(jìn)行增量備份時,其--incremental-basedir應(yīng)該指向上一次的增量備份所在的目錄。

#需要注意的是,增量備份僅能應(yīng)用于InnoDB或XtraDB表,對于MyISAM表而言,執(zhí)行增量備份時其實(shí)進(jìn)行的是完全備份。

#第二次增量備份

innobackupex --defaults-file=/etc/my.cnf--user=root --password=dianzhong --incremental /data/backup/inc2--incremental-basedir=/data/backup/inc1/2017-10-16_14-52-36

#備份恢復(fù)演練

#恢復(fù)到第一次備份點(diǎn)

service mysqld stop

mv /data/mysql /data/mysqlold

mkdir -p /data/mysql

innobackupex --apply-log --redo-only/data/backup/full/2017-10-16_11-57-01

innobackupex --apply-log --redo-only/data/backup/full/2017-10-16_11-57-01--incremental-dir=/data/backup/inc1/2017-10-16_14-52-36

innobackupex --defaults-file=/etc/my.cnf--user=root --password=dianzhong --copy-back/data/backup/full/2017-10-16_11-57-01

chown -R mysql:mysql /data/mysql

service mysqld start

#恢復(fù)到第二次備份點(diǎn)(比恢復(fù)到第一次備份點(diǎn)多一次操作)

servicemysqld stop

mv/data/mysql /data/mysqlold

mkdir -p/data/mysql

innobackupex--apply-log --redo-only /data/backup/full/2017-10-16_11-57-01

innobackupex--apply-log --redo-only /data/backup/full/2017-10-16_11-57-01--incremental-dir=/data/backup/inc1/2017-10-16_14-52-36

innobackupex --apply-log --redo-only/data/backup/full/2017-10-16_11-57-01--incremental-dir=/data/backup/inc2/2017-10-16_14-59-34

innobackupex--defaults-file=/etc/my.cnf --user=root --password=dianzhong --copy-back/data/backup/full/2017-10-16_11-57-01

chown -Rmysql:mysql /data/mysql

servicemysqld start

1.7遠(yuǎn)程/異地備份

#遠(yuǎn)程備份的方法except +

scp +md5(except需要單獨(dú)安裝,方法見《expect SCP安裝及使用》)

1.創(chuàng)建遠(yuǎn)程機(jī)與源機(jī)的互信

#生成密鑰對

[root@localhost ~]# ssh-keygen -t rsa

#傳送到遠(yuǎn)程機(jī)

[root@localhost ~]# ssh-copy-id -i ~/.ssh/id_rsa.pubroot@192.168.0.200

2.備份文件驗(yàn)證

分別獲取本機(jī)備份文件及遠(yuǎn)程機(jī)備份文件之后比對md5碼

3.限速遠(yuǎn)程備份方法

#登陸遠(yuǎn)程機(jī)并獲取遠(yuǎn)程機(jī)上備份文件MD5碼的方法(4個參數(shù):遠(yuǎn)程機(jī)IP、用戶名、密鑰對文件路徑、備份文件路徑)

#!/usr/bin/expect

# viscp.exp#免交互登陸腳本

setipaddress [lindex $argv 0]

setusername [lindex $argv 1]

setpassword_id_rsa [lindex $argv 2]

setfilepath [lindex $argv 3]

if {$argc != 4 } {

puts"Usage: expect scp.exp ipaddress username id_rsa filepath"

exit 1

}

spawn scp-i $password_id_rsa -l 300000 -r $filepath $username@$ipaddress:$filepath

expect"100%"

expect eof

4.登陸遠(yuǎn)程機(jī)并獲取遠(yuǎn)程md5碼的方法

#!/usr/bin/expect

# vi login.exp#免交互登陸腳本

# expectlogin.exp 192.168.0.200 root ~/.ssh/id_rsa

setipaddress [lindex $argv 0]

setusername [lindex $argv 1]

setpassword_id_rsa [lindex $argv 2]

setfilepath [lindex $argv 3]

if {$argc != 4 } {

puts"Usage: expect login.exp ipaddress username id_rsa filepath"

exit 1

}

settimeout 30

spawn ssh-i $password_id_rsa $username@$ipaddress

#spawnssh $username@$ipaddress

#expect"$username@*"{send "df-h\r"}

expect"$username@*"{send"md5sum $filepath\r"}

expect "$username@*"{send "exit\r"}

5.發(fā)送備份成功與否的實(shí)時信息

通過webQQ接口實(shí)時發(fā)送

1.8線上自動化備份策略

1.每天凌晨4點(diǎn)全量備份一次,之后每小時增量備份一次

2.多保留一天的備份數(shù)據(jù),以便可以按時間點(diǎn)恢復(fù)

1.9在其他機(jī)器上恢復(fù)數(shù)據(jù)源

當(dāng)源數(shù)據(jù)庫短時無法恢復(fù)的情況下,可以考慮快速將數(shù)據(jù)庫在另一臺遠(yuǎn)程機(jī)上恢復(fù),之后將數(shù)據(jù)源ip切換即可。

已實(shí)驗(yàn),在數(shù)據(jù)庫基礎(chǔ)配置一致的情況下,具體操作過程同1.5、1.6方式一致即可。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容