Mysql备份工具Xtrabackup

Posted 2022-01-16 diantong

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了Mysql备份工具Xtrabackup相关的知识，希望对你有一定的参考价值。

　　Xtrabackup是一个开源的免费的热备工具，在Xtrabackup包中主要有Xtrabackup和innobackupex两个工具。其中Xtrabackup只能备份InnoDB和XtraDB两种引擎; innobackupex则是封装了Xtrabackup，同时增加了备份MyISAM引擎的功能。

　　Xtrabackup备份时不能备份表结构、触发器等等，也不能智能区分.idb数据文件。另外innobackupex还不能完全支持增量备份，需要和xtrabackup结合起来实现全备的功能。

(1).安装xtrbackup

1）下载安装包

　　网址是https://www.percona.com/downloads/，然后网页查找Xtrabackup，下载自己需要的版本，就是下载速度有点慢。我这里使用的是2.4.14版本。

　　然后下载依赖包，网址是http://rpmfind.net/linux/atrpms/el6-x86_64/atrpms/stable/libev-4.04-2.el6.x86_64.rpm。

　　这两个可以下载好上传到CentOS服务器，也可以使用wget直接在服务器上下载。

2）解压安装

[[email protected] ~]# ls
anaconda-ks.cfg              mysql-5.7.16-1.el7.x86_64.rpm-bundle.tar
libev-4.04-2.el6.x86_64.rpm  Percona-XtraBackup-2.4.14-ref675d4-el7-x86_64-bundle.tar
Mysql
[[email protected] ~]# rpm -ivh libev-4.04-2.el6.x86_64.rpm 
警告：libev-4.04-2.el6.x86_64.rpm: 头V4 DSA/SHA1 Signature, 密钥 ID 66534c2b: NOKEY
准备中...                          ################################# [100%]
正在升级/安装...
   1:libev-4.04-2.el6                 ################################# [100%]
[[email protected] ~]# tar -xf Percona-XtraBackup-2.4.14-ref675d4-el7-x86_64-bundle.tar 
[[email protected] ~]# ls
anaconda-ks.cfg                           Percona-XtraBackup-2.4.14-ref675d4-el7-x86_64-bundle.tar
libev-4.04-2.el6.x86_64.rpm               percona-xtrabackup-24-2.4.14-1.el7.x86_64.rpm
Mysql                                     percona-xtrabackup-24-debuginfo-2.4.14-1.el7.x86_64.rpm
mysql-5.7.16-1.el7.x86_64.rpm-bundle.tar  percona-xtrabackup-test-24-2.4.14-1.el7.x86_64.rpm
[[email protected] ~]# yum -y install percona-xtrabackup-24-2.4.14-1.el7.x86_64.rpm　　//这里用yum安装，因为还有其他的依赖包

3）配置文件

　　修改配置文件/etc/my.cnf，保证[mysqld]模块存在参数datadir=/var/lib/mysql（指向数据目录），因为xtrbackup是根据/etc/my.cnf配置文件来获取需要备份的文件。然后重启mysqld。

(2).xtrbackup的使用

　　一般使用的是innobackupex脚本，因为innobackupex是perl脚本对xtrbackup的封装和功能扩展。

1）用户权限说明

　　在备份数据库时会涉及到两个用户：系统用户与数据库内部的用户。

　　系统用户需要在datadir（配置文件内设置的目录）上具有读写执行权限（rwx）。而数据库内部用户需要：RELOAD和LOCK TABLES权限，为了执行FLUSH TABLES WITH READ LOCK；REPLICATION CLIENT权限，为了获取binary log（二进制日志文件）位置；CREATE TABLESPACE权限，为了导入表，用户表级别的恢复；SUPER权限，为了在slave环境下备份用来启动和关闭slave线程。

2）常用命令格式和常用参数

　　命令格式：

　　innobackupex [参数] [目的地址|源地址]

　　常用参数：

--user=[数据库用户]    以什么用户身份进行操作
--password=[密码]    数据库用户的密码
--port=[端口号]    数据库的端口号，默认3306
--stream=[tar|xbstream]　　打包压缩
--defaults-file=[配置文件]　　指定默认配置文件，默认读取/etc/my.cnf
--no-timestamp　　不创建时间戳文件，而改用目的地址（可以自动创建）
--copy-back　　备份还原的主要选项
--incremental　　使用增量备份，默认使用的完整备份
--incremental-basedir=[地址]　　与--incremental选项联合使用，该参数指定上一级备份的地址来做增量备份

3）完整备份和还原

　　完整备份

[[email protected] ~]# innobackupex --user=root --password=123456 ./db_backup/　　//这个会有大量输出信息
[[email protected] ~]# innobackupex --user=root --password=123456 ./db_backup/ 2>>./db_backup/backup.log　　//如果不想要输出信息，可以将输出信息重定向到指定文件或黑洞文件中
[[email protected] ~]# ls ./db_backup/
2019-06-16_15-49-44  2019-06-16_15-51-23  backup.log
[[email protected] ~]# ls ./db_backup/2019-06-16_15-49-44/
backup-my.cnf ibdata1 performance_schema xtrabackup_checkpoints xtrabackup_logfile
ib_buffer_pool mysql sys xtrabackup_info
[[email protected] ~]# innobackupex --user=root --password=123456 --no-timestamp ./db_backup/test/ 2>>./db_backup/backup.log　　//不使用时间戳创建目录，可自动创建目的地址
[[email protected] ~]# ls ./db_backup/
2019-06-16_15-49-44  2019-06-16_15-51-23  backup.log  test
[[email protected] ~]# ls ./db_backup/test/
backup-my.cnf   ibdata1  performance_schema  xtrabackup_checkpoints  xtrabackup_logfile
ib_buffer_pool  mysql    sys                 xtrabackup_info

　　还原，注意：innobackupex -copy-back不会覆盖已存在的文件。而且还原时需要先关闭服务，如果服务是启动的，那么就不能还原到datadir

[[email protected] ~]# systemctl stop mysqld
[[email protected] ~]# rm -rf /var/lib/mysql/*　　//危险操作，请在测试环境测试
[[email protected] ~]# innobackupex --copy-back ./db_backup/2019-06-16_15-49-44/ 2>>./db_backup/copyback.log
[[email protected] ~]# ll /var/lib/mysql
总用量 12324
-rw-r----- 1 root root      292 6月  16 17:08 ib_buffer_pool
-rw-r----- 1 root root 12582912 6月  16 17:08 ibdata1
drwxr-x--- 2 root root     4096 6月  16 17:08 mysql
drwxr-x--- 2 root root     8192 6月  16 17:08 performance_schema
drwxr-x--- 2 root root     8192 6月  16 17:08 sys
-rw-r----- 1 root root      423 6月  16 17:08 xtrabackup_info
[[email protected] ~]# chown -R mysql:mysql /var/lib/mysql　　//重新授权，否则mysqld无法启动
[[email protected] ~]# systemctl start mysqld
[[email protected] ~]# mysql -uroot -p123456
mysql: [Warning] Using a password on the command line interface can be insecure.
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 2
Server version: 5.7.26 MySQL Community Server (GPL)

Copyright (c) 2000, 2019, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type ‘help;‘ or ‘\h‘ for help. Type ‘\c‘ to clear the current input statement.

mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
| sys                |
+--------------------+
4 rows in set (0.00 sec)

4）增量备份和还原

　　增量备份的实现，依赖于innodb页上面的LSN（log sequence number），每次对数据库的修改都会导致LSN自增。增量备份会复制指定LSN<日志序列号>之后的所有数据页。

　　查看完整备份的LSN

[[email protected] ~]# cat ./db_backup/2019-06-16_15-49-44/xtrabackup_checkpoints 
backup_type = full-backuped　　//代表完整备份
from_lsn = 0
to_lsn = 2525919
last_lsn = 2525928
compact = 0
recover_binlog_info = 0
flushed_lsn = 2525928

　　创建一些数据，然后以2019-06-16_15-49-44时间戳创建第一个增量备份，并查看LSN

[[email protected] ~]# mysql -uroot -p123456
mysql> create database test_db;
Query OK, 1 row affected (0.00 sec)

mysql> use test_db;
Database changed
mysql> create table user_tb(id int,name varchar(20));
Query OK, 0 rows affected (0.01 sec)

mysql> insert into user_tb values(1,‘zhangsan‘);
Query OK, 1 row affected (0.00 sec)

mysql> exit
Bye
[[email protected] ~]# innobackupex -uroot -p123456 --incremental --incremental-basedir=./db_backup/2019-06-16_15-49-44/ ./db_backup/ 2>>./db_backup/backup.log
[[email protected] ~]# ls db_backup/
2019-06-16_15-49-44  2019-06-16_15-51-23  2019-06-16_17-26-54  backup.log  copyback.log  test
[[email protected] ~]# cat db_backup/2019-06-16_17-26-54/xtrabackup_checkpoints 
backup_type = incremental　　//表示增量备份
from_lsn = 2525919
to_lsn = 2530689
last_lsn = 2530698
compact = 0
recover_binlog_info = 0
flushed_lsn = 2530698

　　再创建一些数据，以上一个增量备份创建新的增量备份，并查看LSN

[[email protected] ~]# mysql -u root -p123456
mysql> use test_db;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed
mysql> insert into user_tb values(2,‘lisi‘);
Query OK, 1 row affected (0.00 sec)

mysql> exit
Bye
[[email protected] ~]# innobackupex --user=root --password=123456 --incremental --incremental-basedir=db_backup/2019-06-16_17-26-54/ ./db_backup/ 2>>./db_backup/backup.log
[[email protected] ~]# ls db_backup/                        
2019-06-16_15-49-44  2019-06-16_17-26-54  backup.log    test
2019-06-16_15-51-23  2019-06-16_17-40-13  copyback.log
[[email protected] ~]# cat db_backup/2019-06-16_17-40-13/xtrabackup_checkpoints 
backup_type = incremental
from_lsn = 2530689
to_lsn = 2530892
last_lsn = 2530901
compact = 0
recover_binlog_info = 0
flushed_lsn = 2530901

　　增量备份的还原就比较麻烦了：

　　　　第一步，从完整备份一步步升上来。首先是完整备份，innobackupex --apply-log --redo-only [完整备份的地址]。接着是除了想要还原到的增量备份，都需要innobackupex --apply-log --redo-only [完整备份的地址] --incremental-dir=[第1次到第n-1次增量备份地址]，一个个执行过去。然后想要还原的增量备份innobackupex --apply-log [完整备份的地址] --incremental-dir=[第n次增量备份地址]。这时所有需要的日志就到了完整备份目录下，最后执行innobackupex --apply-log [完整备份的地址]，将未完成的日志执行。

　　　　第二步、停止mysqld，恢复数据，恢复目录及文件权限，启动mysqld，检查是否正常。

　　还原实例：

[[email protected] ~]# innobackupex --apply-log --redo-only db_backup/2019-06-16_15-49-44/ 2>>db_backup/copyback.log
[[email protected] ~]# innobackupex --apply-log --redo-only db_backup/2019-06-16_15-49-44/ --incremental-dir=db_backup/2019-06-16_17-26-54/ 2>>db_backup/copyback.log
[[email protected] ~]# innobackupex --apply-log db_backup/2019-06-16_15-49-44/ --incremental-dir=db_backup/2019-06-16_17-40-13/ 2>>db_backup/copyback.log
[[email protected] ~]# innobackupex --apply-log db_backup/2019-06-16_15-49-44/ 2>>db_backup/copyback.log
[[email protected] ~]# systemctl stop mysqld
[[email protected] ~]# rm -rf /var/lib/mysql/*　　//危险操作
[[email protected] ~]# innobackupex --copy-back db_backup/2019-06-16_15-49-44/ 2>db_backup/copyback.log
[[email protected] ~]# chown -R mysql:mysql /var/lib/mysql/
[[email protected] ~]# systemctl start mysqld
[[email protected] ~]# mysql -uroot -p123456
mysql> use test_db;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed
mysql> select * from user_tb;
+------+----------+
| id | name |
+------+----------+
| 1 | zhangsan |
| 2 | lisi |
+------+----------+
2 rows in set (0.00 sec)