MySQL备份与还原

Posted PyGoer

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了MySQL备份与还原相关的知识，希望对你有一定的参考价值。

一 理解mysql备份与恢复

备份：存储的数据副本;原始数据,持续改变。

恢复：把副本应用到线上系统;仅能恢复至备份操作时刻的数据状态。

时间点恢复：binary logs。

为什么备份？
1.灾难恢复：硬件故障（冗余）、软件故障（bug）、自然灾害、黑客攻击、误操作、...
2.用于测试。

备份时应该注意事项：
1.能容忍最多丢失多少数据；
2.恢复数据需要在多长时间内完成；
3.需要恢复哪些数据；
4.做恢复演练：
 测试备份的可用性；
 增强恢复操作效率；
 ...

备份类型：
1.备份的数据的集范围：
 完全备份和部分备份
  完全备份：整个数据集;
  部分备份：数据集的一部分，比如部分表;
2.完全备份、增量备份、差异备份：
 完全备份
 增量备份：仅备份自上一次完全备份或 增量备份以来变量的那部数据;
 差异备份：仅备份自上一次完全备份以来变量的那部数据;
3.物理备份、逻辑备份：
 物理备份：复制数据文件进行备份;
 逻辑备份：从数据库导出数据另存在一个或多个文件中;
4.根据数据服务是否在线：
 热备：读写操作均可进行的状态下所做的备份;
 温备：可读但不可写状态下进行的备份;
 冷备：读写操作均不可进行的状态下所做的备份。

备份需要考虑因素：
1.锁定资源多长时间？
2.备份过程的时长？
3.备份时的服务器负载？
4.恢复过程的时长？

备份策略：
1.全量+差异
2.全量+增量
3.备份手段：物理、逻辑

备份什么？
数据、二进制日志、InnoDB的事务日志、代码（存储过程、存储函数、触发器、事件调度器）、服务器的配置文件。

备份工具：
1.mysqldump：mysql服务自带的备份工具;逻辑备份工具:
 完全、部分备份;
 InnoDB：热备;
 MyISAM：温备。
2.xtrabackup：
 由Percona提供，开源工具，支持对InnoDB做热备，物理备份工具:
  全量备份、部分备份;
  全量备份、增量备份;
  全量备份、差异备份;

备份策略：
1.完全+差异+binlog
2.完全+增量+binlog
3.备份，多久一次？
 数据变化量
 可用的备份存储空间

二 MySQL备份与恢复工具介绍

1.mysqldump：
逻辑备份、完全备份、部分备份；
二次封装工具：
mydumper(perl脚本)
phpMyAdmin
msyqldump Usage: 

Usage: mysqldump [OPTIONS] database [tables]
OR     mysqldump [OPTIONS] --databases [OPTIONS] DB1 [DB2 DB3...]
OR     mysqldump [OPTIONS] --all-databases [OPTIONS]


选项：
MyISAM存储引擎：支持温备，备份时要锁定表:

-x, --lock-all-tables          #锁定所有库的所有表，读锁
-l, --lock-tables           #锁定指定库所有表


InnoDB存储引擎：支持温备和热备:

--single-transaction          #创建一个事务，基于此快照执行备份;


其它选项:

-R, --routines            #存储过程和存储函数;
--triggers             #备份触发器
-E, --events            #备份调度器
--master-data[=#]
  1：记录为CHANGE MASTER TO语句，此语句不被注释
  2：记录为CHANGE MASTER TO语句，此语句被注释
--flush-logs            #锁定表完成后，即进行日志刷新操作


示例：

[[email protected] ~]# mysqldump -hlocalhost -uroot --databases hellodb > /tmp/hellodb-$(date +%F).sql
MariaDB [hellodb]> SELECT * FROM students;
+-------+---------------+-----+--------+---------+-----------+
| StuID | Name          | Age | Gender | ClassID | TeacherID |
+-------+---------------+-----+--------+---------+-----------+
|     1 | Shi Zhongyu   |  22 | M      |       2 |         3 |
|     2 | Shi Potian    |  22 | M      |       1 |         7 |
|     3 | Xie Yanke     |  53 | M      |       2 |        16 |
|     4 | Ding Dian     |  32 | M      |       4 |         4 |
|     5 | Yu Yutong     |  26 | M      |       3 |         1 |
|     6 | Shi Qing      |  46 | M      |       5 |      NULL |
|     7 | Xi Ren        |  19 | F      |       3 |      NULL |
|     8 | Lin Daiyu     |  17 | F      |       7 |      NULL |
|     9 | Ren Yingying  |  20 | F      |       6 |      NULL |
|    10 | Yue Lingshan  |  19 | F      |       3 |      NULL |
|    11 | Yuan Chengzhi |  23 | M      |       6 |      NULL |
|    12 | Wen Qingqing  |  19 | F      |       1 |      NULL |
|    13 | Tian Boguang  |  33 | M      |       2 |      NULL |
|    14 | Lu Wushuang   |  17 | F      |       3 |      NULL |
|    15 | Duan Yu       |  19 | M      |       4 |      NULL |
|    16 | Xu Zhu        |  21 | M      |       1 |      NULL |
|    17 | Lin Chong     |  25 | M      |       4 |      NULL |
|    18 | Hua Rong      |  23 | M      |       7 |      NULL |
|    19 | Xue Baochai   |  18 | F      |       6 |      NULL |
|    20 | Diao Chan     |  19 | F      |       7 |      NULL |
|    21 | Huang Yueying |  22 | F      |       6 |      NULL |
|    22 | Xiao Qiao     |  20 | F      |       1 |      NULL |
|    23 | Ma Chao       |  23 | M      |       4 |      NULL |
|    24 | Xu Xian       |  27 | M      |    NULL |      NULL |
|    25 | Sun Dasheng   | 100 | M      |    NULL |      NULL |
+-------+---------------+-----+--------+---------+-----------+
MariaDB [hellodb]> DELETE FROM students WHERE StuID=14;
MariaDB [hellodb]> SHOW MASTER LOGS;
+------------------+-----------+
| Log_name         | File_size |
+------------------+-----------+
| mysql-bin.000001 |       489 |
+------------------+-----------+
MariaDB [hellodb]> exit
[[email protected] ~]# mysqldump -hlocalhost -uroot --master-data=1 --databases hellodb > /tmp/hellodb-$(date +%F).sql
CHANGE MASTER TO MASTER_LOG_FILE=‘mysql-bin.000001‘, MASTER_LOG_POS=489;   (此行未被注释)
[[email protected] ~]# mysqldump -hlocalhost -uroot --master-data=2 --databases hellodb > /tmp/hellodb-$(date +%F).sql
-- CHANGE MASTER TO MASTER_LOG_FILE=‘mysql-bin.000001‘, MASTER_LOG_POS=489;  (此行被注释)
[[email protected] ~]# mysqldump -hlocalhost -uroot --master-data=2 --flush-logs --single-transaction --databases hellodb > /tmp/hellodb-$(date +%F).sql
MariaDB [(none)]> SHOW MASTER LOGS;
+------------------+-----------+
| Log_name         | File_size |
+------------------+-----------+
| mysql-bin.000001 |       532 |
| mysql-bin.000002 |       245 |
+------------------+-----------+
MariaDB [hellodb]> DELETE FROM students WHERE StuID=10;
MariaDB [hellodb]> DROP DATABASE hellodb;
MariaDB [(none)]> exit;
[[email protected] mysql]# mysqlbinlog -j 245 mysql-bin.000002 > /tmp/hellodb.binlog.sql
备份到另一主机：
[[email protected] mysql]# scp /tmp/hellodb* [email protected]:/tmp/
[[email protected] ~]# mysql < /tmp/hellodb-2017-06-03.sql
[[email protected] ~]# mysql
MariaDB [(none)]> use hellodb;
MariaDB [hellodb]> SELECT * FROM students;
+-------+---------------+-----+--------+---------+-----------+
| StuID | Name          | Age | Gender | ClassID | TeacherID |
+-------+---------------+-----+--------+---------+-----------+
|     1 | Shi Zhongyu   |  22 | M      |       2 |         3 |
|     2 | Shi Potian    |  22 | M      |       1 |         7 |
|     3 | Xie Yanke     |  53 | M      |       2 |        16 |
|     4 | Ding Dian     |  32 | M      |       4 |         4 |
|     5 | Yu Yutong     |  26 | M      |       3 |         1 |
|     6 | Shi Qing      |  46 | M      |       5 |      NULL |
|     7 | Xi Ren        |  19 | F      |       3 |      NULL |
|     8 | Lin Daiyu     |  17 | F      |       7 |      NULL |
|     9 | Ren Yingying  |  20 | F      |       6 |      NULL |
|    10 | Yue Lingshan  |  19 | F      |       3 |      NULL |
|    11 | Yuan Chengzhi |  23 | M      |       6 |      NULL |
|    12 | Wen Qingqing  |  19 | F      |       1 |      NULL |
|    13 | Tian Boguang  |  33 | M      |       2 |      NULL |
|    14 | Lu Wushuang   |  17 | F      |       3 |      NULL |
|    15 | Duan Yu       |  19 | M      |       4 |      NULL |
|    16 | Xu Zhu        |  21 | M      |       1 |      NULL |
|    17 | Lin Chong     |  25 | M      |       4 |      NULL |
|    18 | Hua Rong      |  23 | M      |       7 |      NULL |
|    19 | Xue Baochai   |  18 | F      |       6 |      NULL |
|    20 | Diao Chan     |  19 | F      |       7 |      NULL |
|    21 | Huang Yueying |  22 | F      |       6 |      NULL |
|    22 | Xiao Qiao     |  20 | F      |       1 |      NULL |
|    23 | Ma Chao       |  23 | M      |       4 |      NULL |
|    24 | Xu Xian       |  27 | M      |    NULL |      NULL |
|    25 | Sun Dasheng   | 100 | M      |    NULL |      NULL |
+-------+---------------+-----+--------+---------+-----------+
MariaDB [hellodb]> exit
[[email protected] ~]# mysql < /tmp/hellodb.binlog.sql 
[[email protected] ~]# mysql
MariaDB [(none)]> use hellodb;
MariaDB [hellodb]> SELECT * FROM students;
+-------+---------------+-----+--------+---------+-----------+
| StuID | Name          | Age | Gender | ClassID | TeacherID |
+-------+---------------+-----+--------+---------+-----------+
|     1 | Shi Zhongyu   |  22 | M      |       2 |         3 |
|     2 | Shi Potian    |  22 | M      |       1 |         7 |
|     3 | Xie Yanke     |  53 | M      |       2 |        16 |
|     4 | Ding Dian     |  32 | M      |       4 |         4 |
|     5 | Yu Yutong     |  26 | M      |       3 |         1 |
|     6 | Shi Qing      |  46 | M      |       5 |      NULL |
|     7 | Xi Ren        |  19 | F      |       3 |      NULL |
|     8 | Lin Daiyu     |  17 | F      |       7 |      NULL |
|     9 | Ren Yingying  |  20 | F      |       6 |      NULL |
|    11 | Yuan Chengzhi |  23 | M      |       6 |      NULL |
|    12 | Wen Qingqing  |  19 | F      |       1 |      NULL |
|    13 | Tian Boguang  |  33 | M      |       2 |      NULL |
|    14 | Lu Wushuang   |  17 | F      |       3 |      NULL |
|    15 | Duan Yu       |  19 | M      |       4 |      NULL |
|    16 | Xu Zhu        |  21 | M      |       1 |      NULL |
|    17 | Lin Chong     |  25 | M      |       4 |      NULL |
|    18 | Hua Rong      |  23 | M      |       7 |      NULL |
|    19 | Xue Baochai   |  18 | F      |       6 |      NULL |
|    20 | Diao Chan     |  19 | F      |       7 |      NULL |
|    21 | Huang Yueying |  22 | F      |       6 |      NULL |
|    22 | Xiao Qiao     |  20 | F      |       1 |      NULL |
|    23 | Ma Chao       |  23 | M      |       4 |      NULL |
|    24 | Xu Xian       |  27 | M      |    NULL |      NULL |
|    25 | Sun Dasheng   | 100 | M      |    NULL |      NULL |
+-------+---------------+-----+--------+---------+-----------+

 

实现了时间点还原，删除的第10行没被还原
注意：
(1) 脚本化、周期性进行(进行充分测试)；
(2) 备份结果要另存，建议异地存储；对备份的结果做测试；
(3) 配置mysqldump使用binlog做增量备份；    

2.xtrabackup：
MyISAM：温备，不支持增量备份；
InnoDB：热备，增量；
物理备份，速率快、可靠；备份完成后自动校验备份结果集是否可用；还原速度快； 

Usage: [innobackupex [--defaults-file=#] --backup | innobackupex [--defaults-file=#] --prepare] [OPTIONS]
The  innobackupex tool is a Perl script that acts as a wrapper for the xtrabackup C program.


备份 --> 应用日志 --> 还原
完全备份：
完全+binlog(总结)：
备份：innobackupex  --user  --password=  --host=  /PATH/TO/BACKUP_DIR
准备：innobackupex --apply-log  /PATH/TO/BACKUP_DIR
恢复：innobackupex --copy-back
注意：--copy-back需要在mysqld主机本地进行，mysqld服务不能启动；
innodb_log_file_size可能要重新设定； 
总结：完全+增量+binlog
备份：完全+增量+增量+...
完全+差异
准备：
 

innobackupex --apply-log --redo-only BASEDIR 
innobackupex --apply-log --redo-only BASEDIR  --incremental-dir=INCREMENTAL-DIR


恢复：
    innobackupex --copy-back BASEDIR
备份单库：
    --databases
总结：
 mysqldump+binlog
 lvm2+cp/tar+binlog
 xtrabackup(innodb)+binlog
示例：
备份：

MariaDB [hellodb]> GRANT ALL ON *.* TO [email protected]‘172.18.67.%‘ IDENTIFIED BY ‘bpass‘;
MariaDB [hellodb]> FLUSH PRIVILEGES;
[[email protected] ~]# mkdir /mydata/backup -pv
[[email protected] ~]# innobackupex --user=buser --host=172.18.67.12 --password=bpass --databases=hellodb /mydata/backup/
 备份hellodb库
[[email protected] ~]# innobackupex --user=buser --host=172.18.67.12 --password=bpass /mydata/backup/
 备份全部


恢复：

[[email protected] ~]# rm /var/lib/mysql/* -rf
[[email protected] backup]# scp -rp 2017-06-04_14-09-37 [email protected]:/tmp/
[[email protected] ~]# systemctl stop mariadb
[[email protected] ~]# innobackupex --user=root --host=localhost --copy-back /tmp/2017-06-04_14-09-37/
[[email protected] ~]# chown -R mysql.mysql /var/lib/mysql/
[[email protected] ~]# systemctl start mariadb

 
























































































以上是关于MySQL备份与还原的主要内容，如果未能解决你的问题，请参考以下文章

mysql备份与还原-mysqldump备份mysql与source还原

Java程序中实现 MySQL数据库的备份与还原

MySQL数据备份与还原

MySQL备份与还原

MySQL的备份与还原，非常规备份，全量备份，增量备份

怎样备份/还原MySQL数据库 之 MySQL Workbench