1.1數(shù)據(jù)庫備份工具

Percona XtraBackup

官方地址：https://www.percona.com/software/mysql-database/percona-xtrabackup

1.2工具的安裝

#安裝

[root@localhost ~]# cd /opt/

[root@localhost opt]# wget?https://www.percona.com/downloads/XtraBackup/Percona-XtraBackup-2.4.5/binary/redhat/6/x86_64/percona-xtrabackup-24-2.4.5-1.el6.x86_64.rpm

[root@localhost opt]# yum installpercona-xtrabackup-24-2.4.5-1.el6.x86_64.rpm

#如果提示缺失依賴包

[root@localhost opt]# yum -y install perlperl-devel libaio libaio-devel perl-Time-HiRes perl-DBD-MySQL

#如果報(bào)錯(cuò)如下：

postfix-2.10.1-6.el7.x86_64有缺少的需求libmysqlclient.so.18()(64bit)

則需要安裝相關(guān)依賴，檢查系統(tǒng)mysql版本:

[root@localhost opt]# mysql

Welcome to the MySQL monitor.Commands end with ; or \g.

Your MySQL connection id is 7

Server version: 5.7.15-log MySQL CommunityServer (GPL)

#下載依賴軟件包

[root@localhost opt]# wgethttp://dev.mysql.com/get/Downloads/MySQL-5.7/mysql-5.7.15-1.el7.x86_64.rpm-bundle.tar

#解壓縮并安裝mysql-community-libs-compat-5.7.15-1.el7.x86_64.rpm

[root@localhost opt]# mkdir -p mysql

[root@localhost opt]# cd mysql/

[root@localhost opt]# mvmysql-5.7.15-1.el7.x86_64.rpm-bundle.tar mysql/

[root@localhost mysql]# tar -xvfmysql-5.7.15-1.el7.x86_64.rpm-bundle.tar

[root@localhost mysql]# yum installmysql-community-libs-compat-5.7.15-1.el7.x86_64.rpm

1.3工具的配置

Xtrabackup常用參數(shù)

--user=USER指定備份用戶烤惊，不指定的話為當(dāng)前系統(tǒng)用戶

--password=PASSWD指定備份用戶密碼

--port=PORT指定數(shù)據(jù)庫端口

--defaults-group=GROUP-NAME在多實(shí)例的時(shí)候使用

--host=HOST指定備份的主機(jī)粪般，可以為遠(yuǎn)程數(shù)據(jù)庫服務(wù)器

--apply-log回滾日志

--database指定需要備份的數(shù)據(jù)庫仗岸，多個(gè)數(shù)據(jù)庫之間以空格分開

--defaults-file指定mysql的配置文件

--copy-back將備份數(shù)據(jù)復(fù)制回原始位置

--incremental增量備份，后面跟要增量備份的路徑

--incremental-basedir=DIRECTORY增量備份時(shí)使用指向上一次的增量備份所在的目錄

--incremental-dir=DIRECTORY增量備份還原的時(shí)候用來合并增量備份到全量执泰，用來指定全備路徑

--redo-only對增量備份進(jìn)行合并

--rsync加快本地文件傳輸，適用于non-InnoDB數(shù)據(jù)庫引擎。不與--stream共用

--safe-slave-backup

--no-timestamp生成的備份文件不以時(shí)間戳為目錄.

1.4備份及恢復(fù)策略

增量備份從庫到其他服務(wù)器相速；

若主庫掛而從庫正常，則將主線數(shù)據(jù)請求切到從庫鲜锚，嘗試恢復(fù)主庫突诬；

若主從都掛，則從備份服務(wù)器將數(shù)據(jù)恢復(fù)到從庫芜繁，再將主線數(shù)據(jù)請求切到從庫旺隙，之后嘗試恢復(fù)主庫，或者直接啟用遠(yuǎn)程臨時(shí)庫（要考慮集群恢復(fù)后遠(yuǎn)程臨時(shí)庫將變更為真正的數(shù)據(jù)源骏令，實(shí)時(shí)數(shù)據(jù)如何恢復(fù)到集群的問題Ｊ呓荨）；

1.5全量備份及恢復(fù)

#全量備份及恢復(fù)

[root@localhost opt]# innobackupex--user=root --password=dianzhong /data/backup/full

#上個(gè)命令在我的/data/backup/full/目錄生成了一個(gè)文件夾【2017-10-16_11-57-01】

#一般情況下榔袋，這個(gè)備份不能用于恢復(fù)周拐，因?yàn)閭浞莸臄?shù)據(jù)中可能會包含尚未提交的事務(wù)或已經(jīng)提交但尚未同步至數(shù)據(jù)文件中的事務(wù)，此時(shí)數(shù)據(jù)文件處于不一致的狀態(tài)

#因此凰兑，我們現(xiàn)在就是要通過回滾未提交的事務(wù)及同步已經(jīng)提交的事務(wù)至數(shù)據(jù)文件也使得數(shù)據(jù)文件處于一致性狀態(tài)妥粟。

innobackupex --user=root --password--defaults-file=/data/mysql/my.cnf --apply-log /data/backup/full/2017-10-16_11-57-01

#恢復(fù)操作演練

#關(guān)掉服務(wù)，遷移已有的數(shù)據(jù)目錄

service mysqld stop

mv /data/mysql /data/mysqlold

mkdir -p /data/mysql

#執(zhí)行innobackupex恢復(fù)命令

innobackupex--defaults-file=/etc/my.cnf --user=root --password=dianzhong --copy-back/data/backup/full/2017-10-16_11-57-01

#對新目錄執(zhí)行賦權(quán)操作吏够，此操作需在innobackupex恢復(fù)命令后

chown -R mysql.mysql /data/mysql

#重啟服務(wù)勾给，并檢查數(shù)據(jù)是否恢復(fù)

service mysqld start

1.6增量備份及恢復(fù)

#全量備份

innobackupex--defaults-file=/data/mysql/my.cnf--user=root --password=passwd/data/backup/full

#第一次增量備份

innobackupex --defaults-file=/etc/my.cnf--user=root --password=dianzhong --incremental /data/backup/inc1--incremental-basedir=/data/backup/full/2017-10-16_11-57-01

# --incremental-basedir指的是完全備份所在的目錄

#此命令執(zhí)行結(jié)束后，innobackupex命令會在/data/backup目錄中創(chuàng)建一個(gè)新的以時(shí)間命名的目錄以存放所有的增量備份數(shù)據(jù)锅知。

#另外播急，在執(zhí)行過增量備份之后再一次進(jìn)行增量備份時(shí)，其--incremental-basedir應(yīng)該指向上一次的增量備份所在的目錄售睹。

#需要注意的是桩警，增量備份僅能應(yīng)用于InnoDB或XtraDB表，對于MyISAM表而言昌妹，執(zhí)行增量備份時(shí)其實(shí)進(jìn)行的是完全備份捶枢。

#第二次增量備份

innobackupex --defaults-file=/etc/my.cnf--user=root --password=dianzhong --incremental /data/backup/inc2--incremental-basedir=/data/backup/inc1/2017-10-16_14-52-36

#備份恢復(fù)演練

#恢復(fù)到第一次備份點(diǎn)

service mysqld stop

mv /data/mysql /data/mysqlold

mkdir -p /data/mysql

innobackupex --apply-log --redo-only/data/backup/full/2017-10-16_11-57-01

innobackupex --apply-log --redo-only/data/backup/full/2017-10-16_11-57-01--incremental-dir=/data/backup/inc1/2017-10-16_14-52-36

innobackupex --defaults-file=/etc/my.cnf--user=root --password=dianzhong --copy-back/data/backup/full/2017-10-16_11-57-01

chown -R mysql:mysql /data/mysql

service mysqld start

#恢復(fù)到第二次備份點(diǎn)(比恢復(fù)到第一次備份點(diǎn)多一次操作)

servicemysqld stop

mv/data/mysql /data/mysqlold

mkdir -p/data/mysql

innobackupex--apply-log --redo-only /data/backup/full/2017-10-16_11-57-01

innobackupex--apply-log --redo-only /data/backup/full/2017-10-16_11-57-01--incremental-dir=/data/backup/inc1/2017-10-16_14-52-36

innobackupex --apply-log --redo-only/data/backup/full/2017-10-16_11-57-01--incremental-dir=/data/backup/inc2/2017-10-16_14-59-34

innobackupex--defaults-file=/etc/my.cnf --user=root --password=dianzhong --copy-back/data/backup/full/2017-10-16_11-57-01

chown -Rmysql:mysql /data/mysql

servicemysqld start

1.7遠(yuǎn)程/異地備份

#遠(yuǎn)程備份的方法except +

scp +md5（except需要單獨(dú)安裝握截，方法見《expect SCP安裝及使用》）

1.創(chuàng)建遠(yuǎn)程機(jī)與源機(jī)的互信

#生成密鑰對

[root@localhost ~]# ssh-keygen -t rsa

#傳送到遠(yuǎn)程機(jī)

[root@localhost ~]# ssh-copy-id -i ~/.ssh/id_rsa.pubroot@192.168.0.200

2.備份文件驗(yàn)證

分別獲取本機(jī)備份文件及遠(yuǎn)程機(jī)備份文件之后比對md5碼

3.限速遠(yuǎn)程備份方法

#登陸遠(yuǎn)程機(jī)并獲取遠(yuǎn)程機(jī)上備份文件MD5碼的方法（4個(gè)參數(shù)：遠(yuǎn)程機(jī)IP、用戶名柱蟀、密鑰對文件路徑川蒙、備份文件路徑）

#!/usr/bin/expect

# viscp.exp#免交互登陸腳本

setipaddress [lindex $argv 0]

setusername [lindex $argv 1]

setpassword_id_rsa [lindex $argv 2]

setfilepath [lindex $argv 3]

if {$argc != 4 } {

puts"Usage: expect scp.exp ipaddress username id_rsa filepath"

exit 1

}

spawn scp-i $password_id_rsa -l 300000 -r $filepath $username@$ipaddress:$filepath

expect"100%"

expect eof

4.登陸遠(yuǎn)程機(jī)并獲取遠(yuǎn)程md5碼的方法

#!/usr/bin/expect

# vi login.exp#免交互登陸腳本

# expectlogin.exp 192.168.0.200 root ~/.ssh/id_rsa

setipaddress [lindex $argv 0]

setusername [lindex $argv 1]

setpassword_id_rsa [lindex $argv 2]

setfilepath [lindex $argv 3]

if {$argc != 4 } {

puts"Usage: expect login.exp ipaddress username id_rsa filepath"

exit 1

}

settimeout 30

spawn ssh-i $password_id_rsa $username@$ipaddress

#spawnssh $username@$ipaddress

#expect"$username@*"{send "df-h\r"}

expect"$username@*"{send"md5sum $filepath\r"}

expect "$username@*"{send "exit\r"}

5.發(fā)送備份成功與否的實(shí)時(shí)信息

通過webQQ接口實(shí)時(shí)發(fā)送

1.8線上自動(dòng)化備份策略

1.每天凌晨4點(diǎn)全量備份一次，之后每小時(shí)增量備份一次

2.多保留一天的備份數(shù)據(jù)长已，以便可以按時(shí)間點(diǎn)恢復(fù)

1.9在其他機(jī)器上恢復(fù)數(shù)據(jù)源

當(dāng)源數(shù)據(jù)庫短時(shí)無法恢復(fù)的情況下畜眨，可以考慮快速將數(shù)據(jù)庫在另一臺遠(yuǎn)程機(jī)上恢復(fù)，之后將數(shù)據(jù)源ip切換即可术瓮。

已實(shí)驗(yàn)康聂，在數(shù)據(jù)庫基礎(chǔ)配置一致的情況下，具體操作過程同1.5胞四、1.6方式一致即可恬汁。