MySQL--当mysqldump --single-transaction遇到alter table

Posted 2020-09-26 笑东风

部分生产环境采用mysqldump --single-transaction的方式在夜间进行数据库备份，而同事恰好在备份期间执行了alter table操作，操作部分成功部分失败，为啥呢？

##========================================================================##

以下测试在MySQL 5.6.36上执行，该问题存在版本差异！

MySQL 5.5 版本测试结果：《MySQL--当mysqldump --single-transaction遇到alter table（2）》

##========================================================================##

在mysqldump对single-transaction参数的解释为：

Creates a consistent snapshot by dumping all tables in a
single transaction. Works ONLY for tables stored in
storage engines which support multiversioning (currently
only InnoDB does); the dump is NOT guaranteed to be
consistent for other storage engines. While a
--single-transaction dump is in process, to ensure a
valid dump file (correct table contents and binary log
position), no other connection should use the following
statements: ALTER TABLE, DROP TABLE, RENAME TABLE,
TRUNCATE TABLE, as consistent snapshot is not isolated
from them. Option automatically turns off --lock-tables.

红色字体部分是重点，但是看得有些迷糊，还是动手测试下。

根据《mysqldump的几个主要选项探究》的介绍，我们备份执行的命令mysqldump --single-transaction --master-data相当于执行下面代码：

FLUSH TABLES;
FLUSH TABLES WITH READ LOCK;
SET SESSION TRANSACTION ISOLATION LEVEL REPEATABLE READ;
START TRANSACTION WITH CONSISTENT SNAPSHOT;
SHOW MASTER STATUS;
UNLOCK TABLES;

SHOW TABLES LIKE \'xxx\'
SET OPTION SQL_QUOTE_SHOW_CREATE=1
SHWO CREATE TABLE \'xxx\'
SHOW FIELDS FROM \'xxx\'
SHOW TABLE STATUS LIKE \'xxx\'
SELECT /*!40001 SQL_NO_CACHE */ * FROM  xxx

QUIT

 

 

场景1：mysqldump开始但尚未备份到表tb001时，另外回话对表tb001进行alter操作，然后mysqldump对表tb001进行导出

alter操作顺利完成，但是mysqldump操作失败。

 

场景2：mysqldump开始备份并完成tb001的导出，在对其他表进行导出过程中，其他回话对表进行alter操作

alter table操作被阻塞直至mysqldump完成或失败后退出。

 

使用mysqldump备份时，模拟场景2的环境，报错信息为：

mysqldump: Error 1412: Table definition has changed, please retry transaction when dumping table `tb1002` at row: 0

查看导出文件，最后内容为：

--
-- Dumping data for table `tb1002`
--

LOCK TABLES `tb1002` WRITE;
/*!40000 ALTER TABLE `tb1002` DISABLE KEYS */;

 

##========================================================================##

总结： 

single-transaction参数通过Innodb的多版本来获得数据一致性，而ALTER TABLE, DROP TABLE, RENAME TABLE,TRUNCATE TABLE等操作会破坏数据一致性，两种操作不能并发执行。

如果修改表操作在 ”mysqldump开启后但还未导出修改表数据前“ 的时间段内开始，则修改表操作成功完成，而mysqldump会执行失败；

如果修改表操作在 “mysqldum已导出修改表数据但还未结束mysqldump操作前”的时间段内开始，则修改表操作被阻塞，mysqldum能成功完成，在mysqldump操作完成后修改表操作方可正常执行。

##========================================================================##