MySQL 事务管理

Posted 小倪同学 -_-

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了MySQL 事务管理相关的知识，希望对你有一定的参考价值。

文章目录

CURD

CURD是一个数据库技术中的缩写词，一般的项目开发的各种参数的基本功能都是CURD。作用是用于处理数据的基本原子操作。它代表创建（Create）、更新（Update）、读取（Retrieve）和删除（Delete）操作。

如果CURD不加控制，会有什么问题呢？

例如买票系统，当客户端A买票时还剩一张，将票买走，还没有执行更新数据库时，客户端B检测了票数，发现票数大于0,于是又买一张。然后客户端A将票数更新回数据库。这时就会出现同一张票被买了两次。

CURD满足什么属性，能解决上述问题？

  • 买票的过程得是原子性的
  • 买票互相间不能影响
  • 买的票应该要永久有效
  • 买前，和买后都要是确定的状态

什么是事务

事务就是一组DML语句组成，这些语句在逻辑上存在相关性，这一组DML语句要么全部成功，要么全部失败，是一个整体。mysql提供一种机制，保证我们达到这样的效果。事务还规定不同的客户端看到的数据是不相同的。

事务就是要做的或所做的事情，主要用于处理操作量大，复杂度高的数据。处理操作量大，复杂度高的数据时，需要多条 MySQL 语句构成，那么所有这些操作合起来，就构成了一个事务。

正如我们上面所说，一个 MySQL 数据库，可不止你一个事务在运行，同一时刻，甚至有大量的请求被包装成事务，在向 MySQL 服务器发起事务处理请求。而每条事务至少一条 SQL ，那么会有很多 SQL ,这样如果大家都访问同样的表数据，在不加保护的情况，就绝对会出现问题。甚至，因为事务由多条 SQL 构成，那么，也会存在执行到一半出错或者不想再执行的情况，那么已经执行的怎么办呢？

所以，一个完整的事务，绝对不是简单的 sql 集合，还需要满足如下四个属性：

  • 原子性：一个事务（transaction）中的所有操作，要么全部完成，要么全部不完成，不会结束在中间某个环节。事务在执行过程中发生错误，会被回滚（Rollback）到事务开始前的状态，就像这个事务从来没有执行过一样。
  • 一致性：在事务开始之前和事务结束以后，数据库的完整性没有被破坏。这表示写入的资料必须完全符合所有的预设规则，这包含资料的精确度、串联性以及后续数据库可以自发性地完成预定的工作。
  • 隔离性：数据库允许多个并发事务同时对其数据进行读写和修改的能力，隔离性可以防止多个事务并发执行时由于交叉执行而导致数据的不一致。事务隔离分为不同级别，包括读未提交（ Read uncommitted ）、读提交（ read committed ）、可重复读（ repeatable read ）和串行化（ Serializable ）
  • 持久性：事务处理结束后，对数据的修改就是永久的，即便系统故障也不会丢失。

上面四个属性，可以简称为 ACID 。原子性（Atomicity，或称不可分割性）；一致性（Consistency）；隔离性（Isolation，又称独立性）；持久性（Durability）。

为什么会出现事务

事务被 MySQL 编写者设计出来,本质是为了当应用程序访问数据库的时候,事务能够简化我们的编程模型,不需要我们去考虑各种各样的潜在错误和并发问题.可以想一下当我们使用事务时,要么提交,要么回滚,我们不会去考虑网络异常了,服务器宕机了,同时更改一个数据怎么办对吧?因此事务本质上是为了应用层服务的.而不是伴随着数据库系统天生就有的。

注意：我们后面把 MySQL 中的一行信息，称为一行记录

事务的版本支持

在 MySQL 中只有使用了 Innodb 数据库引擎的数据库或表才支持事务， MyISAM 不支持。

查看数据库引擎

  1. 表格显示

  1. 行显示

事务提交方式

事务的提交方式常见的有两种：

  • 自动提交
  • 手动提交

查看事务提交方式

用 SET 来改变 MySQL 的自动提交模式:

事务常见操作方式

事前准备

为了便于演示，我们将mysql的默认隔离级别设置成读未提交，具体操作下面会讲，现在以使用为主

创建测试表

  1. 事务的开始与回滚

  1. 未commit，客户端崩溃，MySQL自动会回滚（隔离级别需设置为读未提交）

  1. commit后，客户端崩溃，MySQL数据不会在受影响，已经持久化

  1. begin操作会自动更改提交方式，不会受MySQL是否自动提交影响

准备操作

测试

  1. 单条 SQL 与事务的关系

实验一

关闭自动提交

实验结果

实验二

结论：

  • 只要输入begin或者start transaction，事务便必须要通过commit提交，才会持久化，与是否设置set autocommit无关。
  • 事务可以手动回滚，同时，当操作异常，MySQL会自动回滚
  • 对于 InnoDB 每一条 SQL 语言都默认封装成事务，自动提交。（select有特殊情况，因为 MySQL 有 MVCC ）
  • 从上面的例子，我们能看到事务本身的原子性(回滚)和持久性(commit)

事务操作注意事项

  • 如果没有设置保存点，也可以回滚，只能回滚到事务的开始。直接使用 rollback(前提是事务还没有提交)
  • 如果一个事务被提交了（commit），则不可以回退（rollback）
  • 可以选择回退到已设置的保存点
  • InnoDB 支持事务， MyISAM 不支持事务
  • 开始事务可以使 start transaction 或者 begin

事务隔离级别

理解隔离性

  • MySQL服务可能会同时被多个客户端进程(线程)访问，访问的方式以事务方式进行
  • 一个事务可能由多条SQL构成，也就意味着，任何一个事务，都有执行前，执行中，执行后的阶段。而所谓的原子性，其实就是让用户层，要么看到执行前，要么看到执行后。执行中出现问题，可以随时回滚。所以单个事务，对用户表现出来的特性，就是原子性。
  • 但，毕竟所有事务都要有个执行过程，那么在多个事务各自执行多个SQL的时候，就还是有可能会出现互相影响的情况。比如：多个事务同时访问同一张表，甚至同一行数据。
  • 数据库中，为了保证事务执行过程中尽量不受干扰，就有了一个重要特征：隔离性
  • 数据库中，允许事务受不同程度的干扰，就有了一种重要特征：隔离级别

查看与设置隔离性

查看

设置

设置当前会话 or 全局隔离级别语法

set [session | global] transaction isolation level 
read uncommitted | read uncommitted | repeatable read | serializable

设置当前会话隔离性，另起一个会话不会受到影响，只影响当前会话

设置全局隔离性，另起一个会话，会被影响

隔离级别

隔离级别如何实现：隔离，基本都是通过锁实现的，不同的隔离级别，锁的使用是不同的。常见有，表锁，行锁，读锁，写锁，间隙锁(GAP),Next-Key锁(GAP+行锁)等。

读未提交【Read Uncommitted】

在该隔离级别，所有的事务都可以看到其他事务没有提交的执行结果。（实际生产中不可能使用这种隔离级别的），但是相当于没有任何隔离性，也会有很多并发问题，如脏读，幻读，不可重复读等，我们上面为了做实验方便，用的就是这个隔离性

读未提交，几乎没有加锁，虽然效率高，但是问题太多，不建议采用


一个事务在执行中，读到另一个执行中事务的更新(或其他操作)但是未commit的数据，这种现象叫做脏读(dirty read)

读提交【Read Committed】

该隔离级别是大多数数据库的默认的隔离级别（不是 MySQL 默认的）。它满足了隔离的简单定义:一个事务只能看到其他的已经提交的事务所做的改变。这种隔离级别会引起不可重复读，即一个事务执行时，如果多次 select， 可能得到不同的结果。

当前事务并未commit，那么就造成了，同一个事务内，同样的读取，在不同的时间段(依旧还在事务操作中！)，读取到了不同的值，这种现象叫做不可重复读(non reapeatable read)

可重复读【Repeatable Read】

这是 MySQL 默认的隔离级别，它确保同一个事务，在执行中，多次读取操作数据时，会看到同样的数据行。但是会有幻读问题

一般的数据库在可重复读情况的时候，无法屏蔽其他事务insert的数据(为什么？因为隔离性实现是对数据加锁完成的，而insert待插入的数据因为并不存在，那么一般加锁无法屏蔽这类问题),会造成虽然大部分内容是可重复读的，但是insert的数据在可重复读情况被读取出来，导致多次查找时，会多查找出来新的记录，就如同产生了幻觉。这种现象，叫做幻读(phantom read)。很明显，MySQL在RR级别的时候，是解决了幻读问题的(解决的方式是用Next-Key锁(GAP+行锁)解决的。

串行化【Serializable】

这是事务的最高隔离级别，它通过强制事务排序，使之不可能相互冲突，从而解决了幻读的问题。它在每个读的数据行上面加上共享锁。但是可能会导致超时和锁竞争（这种隔离级别太极端，实际生产基本不使用）

总结

  • 隔离级别越严格，安全性越高，但数据库的并发性能也就越低，往往需要在两者之间找一个平衡点
  • 不可重复读的重点是修改和删除：同样的条件, 你读取过的数据,再次读取出来发现值不一样了 幻读的重点在于 新增：同样的条件, 第1次和第2次读出来的记录数不一样
  • 说明： mysql 默认的隔离级别是可重复读,一般情况下不要修改
  • 上面的例子可以看出，事务也有长短事务这样的概念。事务间互相影响，指的是事务在并行执行的时候，即都没有commit的时候，影响会比较大

一致性(Consistency)

  • 事务执行的结果，必须使数据库从一个一致性状态，变到另一个一致性状态。当数据库只包含事务成功提交的结果时，数据库处于一致性状态。如果系统运行发生中断，某个事务尚未完成而被迫中断，而改未完成的事务对数据库所做的修改已被写入数据库，此时数据库就处于一种不正确（不一致）的状态。因此一致性是通过原子性来保证的。
  • 其实一致性和用户的业务逻辑强相关，一般MySQL提供技术支持，但是一致性还是要用户业务逻辑做支撑，也就是，一致性，是由用户决定的
  • 而技术上，通过AID保证C

理解隔离性

数据库并发的场景有三种

  1. 读-读 ：不存在任何问题，也不需要并发控制
  2. 读-写 ：有线程安全问题，可能会造成事务隔离性问题，可能遇到脏读，幻读，不可重复读
  3. 写-写 ：有线程安全问题，可能会存在更新丢失问题，比如第一类更新丢失，第二类更新丢失

读-写

多版本并发控制（ MVCC ）是一种用来解决 读-写冲突 的无锁并发控制

为事务分配单向增长的事务ID，为每个修改保存一个版本，版本与事务ID关联，读操作只读该事务开始前的数据库的快照。 所以 MVCC 可以为数据库解决以下问题

  • 在并发读写数据库时，可以做到在读操作时不用阻塞写操作，写操作也不用阻塞读操作，提高了数据库并发读写的性能
  • 同时还可以解决脏读，幻读，不可重复读等事务隔离问题，但不能解决更新丢失问题

理解 MVCC 需要知道三个前提知识：

  • 3个记录隐藏字段
  • undo 日志
  • Read View

3个记录隐藏列字段

  • DB_TRX_ID ：6 byte，最近修改( 修改/插入 )事务ID，记录创建这条记录/最后一次修改该记录的事务ID
  • DB_ROLL_PTR : 7 byte，回滚指针，指向这条记录的上一个版本（简单理解成，指向历史版本就行，这些数据一般在 undo log 中）
  • DB_ROW_ID : 6 byte，隐含的自增ID（隐藏主键），如果数据表没有主键， InnoDB 会自动以 DB_ROW_ID 产生一个聚簇索引
  • 实际还有一个删除flag隐藏字段, 既记录被更新或删除但并不代表真的删除，相当于一个标记

假设测试表结构如下

实际的表格为

我们目前并不知道创建该记录的事务ID，隐式主键，我们就默认设置成null，1。第一条记录也没有其他版本，我们设置回滚指针为null。

undo 日志

MySQL 将来是以服务进程的方式，在内存中运行。我们之前所讲的所有机制：索引，事务，隔离性，日志等，都是在内存中完成的，即在 MySQL 内部的相关缓冲区中，保存相关数据，完成各种判断操作。然后在合适的时候，将相关数据刷新到磁盘当中的。所以，我们这里理解undo log，简单理解成，就是 MySQL 中的一段内存缓冲区，用来保存日志数据的就行。

模拟 MVCC

现在有一个事务10，对student表中记录进行修改(update)：将name(张三)改成name(李四）

  • 事务10,因为要修改，所以要先给该记录加行锁
  • 修改前，现将改行记录拷贝到undo log中，所以，undo log中就有了一行副本数据。(原理就是写时拷贝)
  • 所以现在 MySQL 中有两行同样的记录。现在修改原始记录中的name，改成 ‘李四’。并且修改原始记录的隐藏字段 DB_TRX_ID 为当前 事务10 的ID, 我们默认从 10 开始，之后递增。而原始记录的回滚指针 DB_ROLL_PTR 列，里面写入undo log中副本数据的地址，从而指向副本记录，既表示我的上一个版本就是它。
  • 事务10提交，释放锁。

此时，最新的记录是’李四‘那条记录。

现在又有一个事务11，对student表中记录进行修改(update)：将age(28)改成age(38)

  • 事务11,因为也要修改，所以要先给该记录加行锁。
  • 修改前，现将改行记录拷贝到undo log中，所以，undo log中就又有了一行副本数据。此时，新的副本，我们采用头插方式，插入undo log。
  • 现在修改原始记录中的age，改成 38。并且修改原始记录的隐藏字段 DB_TRX_ID 为当前 事务11 的ID。而原始记录的回滚指针 DB_ROLL_PTR 列，里面写入undo log中副本数据的地址，从而指向副本记录，既表示我的上一个版本就是它
  • 事务11提交，释放锁

这样，我们就有了一个基于链表记录的历史版本链。所谓的回滚，无非就是用历史数据，覆盖当前数据。

上面的一个一个版本，我们可以称之为一个一个的快照

隔离性相关问题

  1. 上面是以更新（upadte）为主的,如果是delete呢？

它们是一样的，删数据不是清空，而是标记flag为删除即可。

  1. 如果是insert呢？

因为insert是插入，也就是之前没有数据，那么insert也就没有历史版本。但是一般为了回滚操作，insert的数据也是要被放入undo log中，如果当前事务commit了，那么这个undo log 的历史insert记录就可以被清空了。

总的来说，update和delete可以形成版本链，insert暂时不考虑。

  1. select呢？

首先，select不会对数据做任何修改，所以，为select维护多版本，没有意义。

  1. select读取，是读取最新的版本呢？还是读取历史版本？

当前读： 读取最新的记录，就是当前读。增删改，都叫做当前读，select也有可能当前读，比如：select lock in share mode(共享锁), select for update。

快照读： 读取历史版本(一般而言)，就叫做快照读。

总结： 我们可以看到，在多个事务同时删改查的时候，都是当前读，是要加锁的。那同时有select过来，如果也要读取最新版(当前读)，那么也就需要加锁，这就是串行化。
但如果是快照读，读取历史版本的话，是不受加锁限制的。也就是可以并行执行！换言之，提高了效率，即MVCC的意义所在。

那么，是什么决定了，select是当前读，还是快照读呢？是隔离级别

事务都是原子的。所以，无论如何，事务总有先有后。这就是隔离级别存在的原因

但是经过上面的操作我们发现，事务从begin->CURD->commit，是有一个阶段的。也就是事务有执行前，执行中，执行后的阶段。但，不管怎么启动多个事务，总是有先有后的。那么多个事务在执行中，CURD操作是会交织在一起的。为了保证事务的“有先有后”，应该让不同的事务看到它该看到的内容，这就是所谓的隔离性与隔离级别要解决的问题。

那么，如何保证，不同的事务，看到不同的内容呢？也就是如何如何实现隔离级别？
MySQL为我们提供了读视图 (Read View)

Read View

Read View就是事务进行快照读操作的时候生产的读视图 (Read View)，在该事务执行的快照读的那一刻，会生成数据库系统当前的一个快照，记录并维护系统当前活跃事务的ID(当每个事务开启时，都会被分配一个ID, 这个ID是递增的，所以最新的事务，ID值越大)

Read View 在 MySQL 源码中,就是一个类，本质是用来进行可见性判断的。 即当我们某个事务执行快照读的时候，对该记录创建一个 Read View 读视图，把它比作条件,用来判断当前事务能够看到哪个版本的数据，既可能是当前最新的数据，也有可能是该行记录的 undo log 里面的某个版本的数据。

下面是 ReadView 结构

class ReadView  
	// ... 
	private: 
	/** 高水位，大于等于这个ID的事务均不可见*/ 
	trx_id_t m_low_limit_id 

	/** 低水位：小于这个ID的事务均可见 */ 
	trx_id_t m_up_limit_id; 
	
	/** 创建该 Read View 的事务ID*/ 
	trx_id_t m_creator_trx_id; 

	/** 创建视图时的活跃事务id列表*/ 
	ids_t m_ids; 
	
	/** 配合purge，标识该视图不需要小于m_low_limit_no的UNDO LOG， 
	* 如果其他视图也不需要，则可以删除小于m_low_limit_no的UNDO LOG*/ 
	*trx_id_t m_low_limit_no; 

	/** 标记视图是否被关闭*/ 
	bool m_closed; 
	// ... 
;

m_ids; //一张列表，用来维护Read View生成时刻，系统正活跃的事务ID 
up_limit_id; //记录m_ids列表中事务ID最小的ID(没错，这里虽然是up但表示事务最小的ID) 
low_limit_id; //ReadView生成时刻系统尚未分配的下一个事务ID，也就是目前已出现过的事务ID的最大值+1 
creator_trx_id //创建该ReadView的事务ID

我们在实际读取数据版本链的时候，是能读取到每一个版本对应的事务ID的，即：当前记录的 DB_TRX_ID 。
那么，我们现在手里面有的东西就有，当前快照读的 ReadView 和 版本链中的某一个记录的 DB_TRX_ID 。所以现在的问题就是，当前快照读，应不应该读到当前版本记录。

一张图帮你了解Read View

对应源码

如果查到不应该看到当前版本，接下来就是遍历下一个版本，直到符合条件，即可以看到。上面的 readview 是当你进行select的时候，会自动形成。

整体流程

假设当前有条记录：


事务操作：


事务4：修改name(张三) 变成name(李四)

当 事务2 对某行数据执行了快照读 ，数据库为该行数据生成一个 Read View 读视图

//事务2的 Read View 

m_ids; // 1,3 
up_limit_id; // 1 
low_limit_id; // 4 + 1 = 5，原因：ReadView生成时刻，系统尚未分配的下一个事务ID 
creator_trx_id // 2

此时版本链是：


只有事务4修改过该行记录，并在事务2执行快照读前，就提交了事务


我们的事务2在快照读该行记录的时候，就会拿该行记录的 DB_TRX_ID 去跟 up_limit_id,low_limit_id和活跃事务ID列表(trx_list) 进行比较，判断当前事务2能看到该记录的版本。

//事务2的 Read View 
m_ids; // 1,3 
up_limit_id; // 1 
low_limit_id; // 4 + 1 = 5，原因：ReadView生成时刻，系统尚未分配的下一个事务ID 
creator_trx_id // 2 

//事务4提交的记录对应的事务ID 
DB_TRX_ID=4 

//比较步骤 
DB_TRX_ID（4）< up_limit_id（1） ? 不小于，下一步 
DB_TRX_ID（4）>= low_limit_id(5) ? 不大于，下一步 
m_ids.contains(DB_TRX_ID) ? 不包含，说明，事务4不在当前的活跃事务中。 

结论:事务4的更改，应该看到。 
所以事务2能读到的最新数据记录是事务4所提交的版本，而事务4提交的版本也是全局角度上最新的版本

当前读和快照读在RR级别下的区别

当前读和快照读在RR级别下的区别

测试准备

测试用例1


测试用例2

  • 用例1与用例2：唯一区别仅仅是 表1 的事务B在事务A修改age前 快照读 过一次age数据
  • 而 表2 的事务B在事务A修改age前没有进行过快照读。

结论：

  • 事务中快照读的结果是非常依赖该事务首次出现快照读的地方，即某个事务中首次出现快照读，决定该事务后续快照读结果的能力
  • delete同样如此

RR 与 RC的本质区别

  • 正是Read View生成时机的不同，从而造成RC,RR级别下快照读的结果的不同

RR

  • 在RR级别下的某个事务的对某条记录的第一次快照读会创建一个快照及Read View, 将当前系统活跃的其他事务记录起来
  • 此后在调用快照读的时候，还是使用的是同一个Read View，所以只要当前事务在其他事务提交更新之前使用过快照读，那么之后的快照读使用的都是同一个Read View，所以对之后的修改不可见
  • 即RR级别下，快照读生成Read View时，Read View会记录此时所有其他活动事务的快照，这些事务的修改对于当前事务都是不可见的。而早于Read View创建的事务所做的修改均是可见

RC

  • 在RC级别下的，事务中，每次快照读都会新生成一个快照和Read View, 这就是我们在RC级别下的事务中可以看到别的事务提交的更新的原因
  • 在RC隔离级别下，是每个快照读都会生成并获取最新的Read View；而在RR隔离级别下，则是同一个事务中的第一个快照读才会创建Read View, 之后的快照读获取的都是同一个Read View。
  • 正是RC每次快照读，都会形成Read View，所以，RC才会有不可重复读问题。

以上是关于MySQL 事务管理的主要内容，如果未能解决你的问题，请参考以下文章

说一个MySQL里可能90%的程序员都会遇到的坑

MySQL DATE类型（来自易百）

减少InnoDB死锁发生的方法有什么？MySQL学习

Mysql数据库的隔离级别

MySQL事务

MySQL事务