您好,登錄后才能下訂單哦!
Xtrabackup提供了兩種命令行工具:
- xtrabackup:專用于備份InnoDB和XtraDB引擎的數據;
- innobackupex:是一個perl腳本,在執行過程中會調用xtrabackup命令,這個命令即可以實現備份InnoDB,也可以備份Myisam引擎的對象。
xtrabackup是由percona提供的MySQL數據庫備份工具,其備份速度快并且可靠;備份過程不會打斷正在執行的事務;能夠基于壓縮等功能節約磁盤空間和流量;自動實現備份檢驗;還原速度快。
若需要安裝xtrabackup,可以移步其官方網站,在其官網上提供了多種安裝方式。
博文大綱:
- 一、安裝xtrabackup及其插件
- 二、xtrabackup完全備份+binlog增量備份
- 三、xtrabackup完全備份+xtrabackup增量備份
- 四、innobackupex全庫備份+innobackupex增量備份
注:二、三、四是三種不同的備份方案,在生產環境中選擇合適的一種即可。
參考官方文檔,在官方文檔上提供了各個版本的幫助說明。
[root@mysql ~]# yum -y install https://repo.percona.com/yum/percona-release-latest.noarch.rpm
[root@mysql ~]# yum -y install percona-xtrabackup-24
xtrabackup中主要包含兩個工具:
- xtrabackup:是用于熱備份innodb,xtradb表中數據的工具,支持在線熱備份,可以在不加鎖的情況下備份innodb數據表,不過該工具不能操作myisam引擎表。
- innobackupex:是將xtrabackup進行封裝的perl腳本,能同時處理innodb和myisam,但在處理myisam時需要加一個讀鎖,由于操作myisam時需要加讀鎖,所以會堵塞線上服務的寫操作,而Innodb沒有這樣的限制。
[root@mysql test]# yum -y install perl-DBI perl-DBD-MySQL perl-Time-HiRes perl-IO-Socket-SSL perl-TermReadKey.x86_64 perl-Digest-MD5
[root@mysql test]# wget https://www.percona.com/downloads/percona-toolkit/2.2.19/RPM/percona-toolkit-2.2.19-1.noarch.rpm
[root@mysql test]# rpm -ivh percona-toolkit-2.2.19-1.noarch.rpm
[root@mysql test]# mkdir -p /opt/mysqlbackup/{full,inc}
# full:全備存放的目錄
# inc:增量備份存放的目錄
[root@mysql test]# mysql -uroot -p123.com
mysql> create user bakuser@'localhost' identified by '123.com';
mysql> revoke all privileges,grant option from 'bakuser'@'localhost';
mysql> grant reload,lock tables,replication client,process on *.* to bakuser@'localhost';
mysql> flush privileges;
[root@mysql test]# innobackupex --user=bakuser --password=123.com /opt/mysqlbackup/full/
#當備份完成后將出現以下提示信息
............. #忽略部分信息
200116 13:09:21 completed OK!
上述執行相關解釋如下:
- --user:指定連接數據庫的用戶名;
- --password:指定連接數據庫的密碼;
- --defaults-file:指定數據庫的配置文件my.cnf,innobackupex要從其中獲取datadir等信息,如果不指定,則會默認去搜索my.cnf這個文件,搜索順序和mysql啟動時的搜索順序一樣;
- --database:指定要備份的數據據庫,這里指定的數據庫只對myisam表有效,對于innodb數據來說都是全備(所有數據庫中的innodb數據都進行了備份,不是只備份指定的數據庫,恢復時也一樣);
- /opt/mysqlbackup/full:是備份文件的存放位置。
各個文件存放的內容如下:
在進行增量備份前,需要先查看到完全備份時binlog日志位置(position),如下:
[root@mysql 2020-01-17_10-39-52]# pwd
/opt/mysqlbackup/full/2020-01-17_10-39-52
[root@mysql 2020-01-17_10-39-52]# cat xtrabackup_binlog_info
bin_log.000001 154
# 得到完全備份是備份到了bin_log.000001二進制日志中的154的位置
通過二進制日志進行增量備份:
在增量備份前,自行向數據庫中進行增刪改等操作,以便產生新的二進制日志。
[root@mysql ~]# mysqlbinlog --start-position=154 /usr/local/mysql/data/bin_log.000001 > /opt/mysqlbackup/inc/`date +%F`.sql
[root@mysql ~]# rm -rf /usr/local/mysql/data/* #直接刪除本地所有數據
還原完全備份的大概流程如下:
通過--apply-log選項可用于實現上述功能,命令如下:
[root@mysql ~]# innobackupex --apply-log /opt/mysqlbackup/full/2020-01-17_10-39-52/
[root@mysql 2020-01-17_10-39-52]# cat xtrabackup_checkpoints
backup_type = full-prepared #當準備工作完成后,備份目錄下的此文件內容中的備份類型會為:full-prepared
from_lsn = 0
to_lsn = 2841752
last_lsn = 2841761
compact = 0
recover_binlog_info = 0
flushed_lsn = 2841761
注:/opt/mysqlbackup/full/2020-01-17_10-39-52/是備份文件所在目錄名稱,如果執行正確,最后幾行輸出的信息如下:
在實現“準備”的過程中,innobackupex通常還可以使用“--user-memory”選項來指定其可以使用的內存大小,默認為100M,如果有足夠的內存,可以多劃分一些內存給prepare的過程,以提高其完成速度。
在準備工作完成后,即可使用以下命令進行恢復:
[root@mysql ~]# innobackupex --copy-back /opt/mysqlbackup/full/2020-01-17_10-39-52/
確認數據已恢復:
完全備份的數據已經恢復,但是需要注意權限的問題,恢復后的數據屬主及屬組都是當前用戶root,所以還需要更改其屬主及屬組,如下:
[root@mysql ~]# cd /usr/local/mysql/data/
[root@mysql data]# chown -R mysql.mysql .
[root@mysql data]# ll #確認當前屬組與屬主
總用量 122924
drwxr-x--- 2 mysql mysql 90 1月 17 11:15 data1
-rw-r----- 1 mysql mysql 324 1月 17 11:15 ib_buffer_pool
-rw-r----- 1 mysql mysql 12582912 1月 17 11:15 ibdata1
-rw-r----- 1 mysql mysql 50331648 1月 17 11:15 ib_logfile0
-rw-r----- 1 mysql mysql 50331648 1月 17 11:15 ib_logfile1
-rw-r----- 1 mysql mysql 12582912 1月 17 11:15 ibtmp1
drwxr-x--- 2 mysql mysql 4096 1月 17 11:15 mysql
drwxr-x--- 2 mysql mysql 8192 1月 17 11:15 performance_schema
drwxr-x--- 2 mysql mysql 8192 1月 17 11:15 sys
-rw-r----- 1 mysql mysql 20 1月 17 11:15 xtrabackup_binlog_pos_innodb
-rw-r----- 1 mysql mysql 481 1月 17 11:15 xtrabackup_info
-rw-r----- 1 mysql mysql 1 1月 17 11:15 xtrabackup_master_key_id
[root@mysql ~]# systemctl restart mysqld #在數據恢復后,需要重啟服務器,否則數據不統一
[root@mysql ~]# mysql -uroot -p123.com -e "select * from data1.t1;"
+------+------+
| id | name |
+------+------+
| 1 | tom1 |
| 2 | tom2 |
| 3 | tom3 |
+------+------+
為了防止還原時產生大量的二進制日志,在還原時最好臨時關閉二進制日志,如下:
[root@mysql ~]# mysql -uroot -p123.com -e 'set sql_log_bin=0;' #臨時關閉二進制日志
[root@mysql ~]# mysql -uroot -p123.com < /opt/mysqlbackup/inc/2020-01-17.sql
#恢復二進制日志
[root@mysql ~]# mysql -uroot -p123.com -e 'set sql_log_bin=1;' #開啟二進制日志
[root@mysql ~]# mysql -uroot -p123.com -e "select * from data1.t1;"
#確認數據恢復正確
+------+------+
| id | name |
+------+------+
| 1 | tom1 |
| 2 | tom2 |
| 3 | tom3 |
| 4 | tom4 |
| 5 | tom5 |
+------+------+--+i
在第一個備份方案中,增量備份使用的是備份二進制日志,其實xtrabackup還支持進行增量備份,xtrabackup的備份原理如下:
在innodb內部會維護一個redo日志我呢見,也可以叫做事務日志文件(transaction,事務日志),事務日志會存儲每個innodb表數據的記錄修改,當innodb啟動時,innodb會檢查數據文件和事務日志,并能執行兩個步驟:它應用已經提交的事務日志到數據文件,并將修改過但沒有提交的數據進行回滾操作。xtrabackup在啟動時會記住log sequence number(LSN),并且復制所有的數據文件,復制過程需要一些時間,所以這期間如果數據文件有改動,那么將會使數據庫處于一個不同的時間點。這時,xtrabackup會運行一個后臺進程,用于監視事務日志,并從事務日志復制最新的修改,xtrabackup必須持續的做這個操作,是因為事務日志是會輪轉重復的寫入,并且事務日志可以被重用。所以xtrabackup自啟動開始,就不停的將事務日志中每個數據文件的修改都記錄下來。這就是xtrabackup的備份過程。
所以每個innodb的頁面都會包含一個LSN信息,每當相關的數據發生改變,相關的頁面LSN就會自動增長。這就是innodb表可以進行增量備份的基礎。xtrabackup基于innodb的crash-recovery功能,它會復制innodb的data file ,由于不鎖表,復制出來的數據是不一致的,在恢復的時候使用crash-recovery,使得數據恢復一致。
mysql> create database test;
mysql> use test;
mysql> create table xx(id int,name varchar(20));
mysql> insert into xx values(1,'tom1');
mysql> insert into xx values(2,'tom2');
mysql> select * from xx;
+------+------+
| id | name |
+------+------+
| 1 | tom1 |
| 2 | tom2 |
+------+------+
[root@mysql ~]# xtrabackup --defaults-file=/etc/my.cnf --user=bakuser --password="123.com" --port=3306 --backup --target-dir=/opt/mysqlbackup/full/full_incre_$(date '+%F_%T')
上述各個指令解釋如下:
- --defaults-file:指定數據庫的配置文件,如果使用該參數,必須作為第一個參數;
- --user:指定連接數據庫的用戶名;
- --password:指定連接數據庫的密碼;
- --port:指定連接數據庫的端口號;
- --backup:實施備份到target-dir;
- --target-dir=name:備份文件的存放目錄路徑。innobackupex要從其中獲取datadir等信息;
- --database:指定要備份的數據庫,這里指定的數據庫只對myisam和innodb表的表結構有效,對于innodb數據庫來說都是完全備份(恢復時也一樣)。
#先插入新的數據
[root@mysql full]# mysql -uroot -p123.com -e "insert into test.xx values(3,'tom3');"
#再進行增量備份
[root@mysql full]# xtrabackup --defaults-file=/etc/my.cnf --user=bakuser --password="123.com" --port=3306 --backup --target-dir=/opt/mysqlbackup/inc/incre_$(date '+%F_%T') --incremental-basedir=/opt/mysqlbackup/full/full_incre_2020-01-17_14\:34\:39/
在上述指令中,--incremental-basedir是指定上次完整備份或者增量備份文件的位置(即如果是第一次增量備份則指向完全備份所在目錄,在執行過增量備份之后再一次進行增量備份時,其--incremental-basedir應該指向上一次的增量備份所在的目錄)。
查看增量備份文件:
[root@mysql full]# ll /opt/mysqlbackup/inc/
總用量 0
drwxr-x--- 7 root root 274 1月 17 15:12 incre_2020-01-17_15:12:00
# 注:這里的增量備份只是針對innodb,對于myisam來說,還是完整備份。
#再插入新的數據
[root@mysql full]# mysql -uroot -p123.com -e "insert into test.xx values(4,'tom4');"
#進行第二次增量備份
[root@mysql full]# xtrabackup --defaults-file=/etc/my.cnf --user=bakuser --password="123.com" --port=3306 --backup --target-dir=/opt/mysqlbackup/inc/incre_$(date '+%F_%T') --incremental-basedir=/opt/mysqlbackup/inc/incre_2020-01-17_15\:12\:00/
注:第二次增量備份--incremental-basedir應該指向上一次增量備份文件的位置。
恢復數據的大概流程如下:
如果備份文件是tar包,解包命令為:tar -izxf xxx.tar,這里必須使用-i參數,表示忽略存檔中的0字節。
首先準備恢復完全備份:
[root@mysql ~]# xtrabackup --defaults-file=/etc/my.cnf --prepare --user=bakuser --password="123.com" --apply-log-only --target-dir=/opt/mysqlbackup/full/full_incre_2020-01-17_14\:34\:39/
再準備恢復到第一次增量備份的時刻,如下:
[root@mysql ~]# xtrabackup --defaults-file=/etc/my.cnf --prepare --user=bakuser --password='123.com' --apply-log-only --target-dir=/opt/mysqlbackup/full/full_incre_2020-01-17_14\:34\:39/ --incremental-dir=/opt/mysqlbackup/inc/incre_2020-01-17_15\:12\:00/
再準備恢復第二次增量備份,如下:
[root@mysql ~]# xtrabackup --defaults-file=/etc/my.cnf --prepare --user=bakuser --password='123.com' --apply-log-only --target-dir=/opt/mysqlbackup/full/full_incre_2020-01-17_14\:34\:39/ --incremental-dir=/opt/mysqlbackup/inc/incre_2020-01-17_15\:20\:32/
然后停止MySQL數據庫:
[root@mysql ~]# systemctl stop mysqld
開始rsync數據文件:
[root@mysql ~]# cd /opt/mysqlbackup/full/full_incre_2020-01-17_14\:34\:39/
[root@mysql full_incre_2020-01-17_14:34:39]# rsync -rvt --exclude 'xtrabackup_checkpoints' --exclude 'xtrabackup_logfile' ./ /usr/local/mysql/data/
當數據恢復到mysql的data目錄以后,還需要確保所有數據文件的屬主和屬組均為正確的用戶,如我這里需要修改為mysql,如下:
[root@mysql full_incre_2020-01-17_14:34:39]# cd /usr/local/mysql/data/
[root@mysql data]# chown -R mysql.mysql .
#更改恢復后的數據屬組和屬主為mysql
確認數據已恢復:
[root@mysql data]# mysql -uroot -p123.com -e "select * from test.xx;"
+------+------+
| id | name |
+------+------+
| 1 | tom1 |
| 2 | tom2 |
| 3 | tom3 |
| 4 | tom4 |
+------+------+
#準備測試數據
[root@mysql data]# mysql -uroot -p123.com -e "select * from test.xx;"
+------+------+
| id | name |
+------+------+
| 1 | tom1 |
| 2 | tom2 |
| 3 | tom3 |
+------+------+
#開始完全備份
[root@mysql ~]# innobackupex --defaults-file=/etc/my.cnf --user=bakuser --password='123.com' /opt/mysqlbackup/full/full_incre_$(date '+%F_%H%M%S') --no-timestamp
注:--no-timestamp選項來阻止命令自動創建一個以時間命名的目錄,然后即可自定義目錄了;
# 插入測試數據
[root@mysql ~]# mysql -uroot -p123.com -e "insert into xx values(4,'tom4'),(5,'tom5');" test
#進行增量備份
[root@mysql ~]# innobackupex --incremental /opt/mysqlbackup/inc/incre_$(date +%Y%m%d_%H%M%S) --incremental-basedir=/opt/mysqlbackup/full/full_incre_2020-01-17_165254/ --user=bakuser --password='123.com' --no-timestamp
# --incremental-basedir:指定的是上次完全備份或者增量備份的目錄
#由于這是第一次增量備份,所以就需要指定上次完全備份的目錄
[root@mysql ~]# ll /opt/mysqlbackup/inc/ #查看增量備份文件
總用量 0
drwxr-x--- 7 root root 274 1月 17 17:04 incre_20200117_170424
#插入新的數據
[root@mysql ~]# mysql -uroot -p123.com -e "insert into test.xx values(6,'tom6')";
#基于第一次增量備份的目錄文件做第二次增量備份
[root@mysql ~]# innobackupex --incremental /opt/mysqlbackup/inc/incre_$(date +%Y%m%d_%H%M%S) --incremental-basedir=/opt/mysqlbackup/inc/incre_20200117_170424/ --user=bakuser --password='123.com' --no-timestamp
[root@mysql ~]# ll /opt/mysqlbackup/inc/
總用量 0
drwxr-x--- 7 root root 274 1月 17 17:04 incre_20200117_170424
drwxr-x--- 7 root root 274 1月 17 17:10 incre_20200117_171035
[root@mysql ~]# rm -rf /usr/local/mysql/data/*
#恢復完全備份目錄文件
[root@mysql ~]# innobackupex --apply-log --redo-only /opt/mysqlbackup/full/full_incre_2020-01-17_165254/
# 將第一次增量備份合并到全備目錄
[root@mysql ~]# innobackupex --apply-log --redo-only /opt/mysqlbackup/full/full_incre_2020-01-17_165254/ --incremental-dir=/opt/mysqlbackup/inc/incre_20200117_170424/
# 將第二次增量備份合并到全備目錄
[root@mysql ~]# innobackupex --apply-log --redo-only /opt/mysqlbackup/full/full_incre_2020-01-17_165254/ --incremental-dir=/opt/mysqlbackup/inc/incre_20200117_171035/
[root@mysql ~]# systemctl stop mysqld #停止數據庫
#進行恢復
[root@mysql ~]# innobackupex --defaults-file=/etc/my.cnf --user=bakuser --password='123.com' --copy-back /opt/mysqlbackup/full/full_incre_2020-01-17_165254/
[root@mysql ~]# cd /usr/local/mysql/data/
[root@mysql data]# chown -R mysql.mysql .
[root@mysql data]# systemctl start mysqld
[root@mysql data]# mysql -uroot -p123.com -e "select * from test.xx;"
+------+------+
| id | name |
+------+------+
| 1 | tom1 |
| 2 | tom2 |
| 3 | tom3 |
| 4 | tom4 |
| 5 | tom5 |
| 6 | tom6 |
+------+------+
數據恢復成功。
Xtrabackup對備份的數據文件支持“流”功能,即可以將備份的數據通過STDOUT傳輸給tar程序進行歸檔,而不是默認的直接保存至某備份目錄中。要使用此功能,僅需要使用--stream選項即可。如下:
#進行完整備份
[root@mysql opt]# innobackupex --user=bakuser --password="123.com" --stream=tar /opt/mysqlbackup/full/ | gzip > /opt/mysqlbackup/full/full_`date +%F_%H%M%S`.tar.gz
#上述命令生成的備份文件如下:
[root@mysql full]# ll /opt/mysqlbackup/full/
總用量 640
-rw-r--r-- 1 root root 652578 1月 17 17:45 full_2020-01-17_174513.tar.gz
———————— 本文至此結束,感謝閱讀 ————————
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。