02MySQL的redo-log和binlog

Posted PHP开发进阶

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了02MySQL的redo-log和binlog相关的知识,希望对你有一定的参考价值。

今天我们来讲一下mysql的两个日志文件

  • 物理日志redo log

  • 逻辑日志binlog


实例分析

update T set c=c+1 where ID=2;

        首先我们了解一下上面这条更新语句的执行流程。上篇文章我们提到MySQL的查询执行流程,一条查询语句的执行过程一般是经过连接器、分析器、优化器、执行器等功能模块,最后到达存储引擎,更新流程也是如此。只不过连接后是删除缓存,而不是更新缓存。


接下我们来看一下这一条SQL语句的执行流程图:


物理日志redo log

        redo log是在物理格式上的日志,它记录的是数据库中每个页的修改。当有一条记录需要更新的时候,InnoDB 引擎就会先把记录写到 redo log里面,并更新内存,这个时候更新就算完成了。同时,InnoDB 引擎会在适当的时候,将这个操作记录更新到磁盘里面。

        InnoDB 的 redo log 是固定大小的,可以由多个文件组成,是循环写的一个过程。

        write pos 是当前记录的位置,一边写一边后移,写到第 3 号文件末尾后就回到 0 号文件开头。checkpoint 是当前要擦除的位置,也是往后推移并且循环的,擦除记录前要把记录更新到数据文件。


二进制日志binlog

        二进制日志是在存储引擎的上层产生的,不管是什么存储引擎,对数据库进行了修改都会产生二进制日志,并且二进制日志先于redo log被记录。


        为什么MySQL需要使用两个日志呢?因为最开始 MySQL 里并没有 InnoDB 引擎。MySQL 自带的引擎是 MyISAM,但是 MyISAM 没有 crash-safe 的能力,binlog 日志只能用于归档。而 InnoDB 是另一个公司以插件形式引入 MySQL 的,既然只依靠 binlog 是没有 crash-safe 能力的,所以 InnoDB 使用另外一套日志系统——也就是 redo log 来实现 crash-safe 能力。


redolog和binlog的区别

  • redo log 是 InnoDB 引擎特有的;binlog 是 MySQL 的 Server 层实现的,所有引擎都可以使用。

  • redo log 是物理日志,记录的是“在某个数据页上做了什么修改”;binlog 是逻辑日志,记录的是这个语句的原始逻辑,比如“给 ID=2 这一行的 c 字段加 1 ”。

  • redo log 是循环写的,空间固定会用完;binlog 是可以追加写入的。“追加写”是指 binlog 文件写到一定大小后会切换到下一个,并不会覆盖以前的日志。

在上面的update语句执行流程中,我们发现最后三步采用了两阶段提交的方法,redo log 和 binlog 都可以用于表示事务的提交状态,而两阶段提交就是让这两个状态保持逻辑上的一致。


最后也给大家提两点小建议:

  • innodb_flush_log_at_trx_commit 这个参数设置成 1 的时候,表示每次事务的 redo log 都直接持久化到磁盘。这个参数我建议你设置成 1,这样可以保证 MySQL 异常重启之后数据不丢失。

  • sync_binlog 这个参数设置成 1 的时候,表示每次事务的 binlog 都持久化到磁盘。这个参数我也建议你设置成 1,这样可以保证 MySQL 异常重启之后 binlog 不丢失。


以上是关于02MySQL的redo-log和binlog的主要内容,如果未能解决你的问题,请参考以下文章

MySQL总体框架 & redo-log 和 bin-log 的介绍

MySQL学习小结

mysql主从binlog日志自动清理及手动删除

MySQLbinlog日志02binlog日志用于数据恢复

FlinkCdc--Debezium实现Kafka实时监控mysql binlog日志

mysql 原理 ~ binlog