mysql 原理 ~ checkpoint

Posted 开心的蛋黄派

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了mysql 原理 ~ checkpoint相关的知识,希望对你有一定的参考价值。

一 简介:今天咱们来聊聊checkpoint

二 定义:

    checkpoin是重做日志对数据页刷新到磁盘的操作做的检查点,通过LSN号保存记录,作用是当发生宕机等crash情况时,再次启动时会查询checkpoint点,在该检查点之后发生的事物修改恢复到磁盘。

三 作用:

     1 缩短数据库的恢复时间

     数据库恢复时间重做日志中记录了的checkpoint的位置,这个点之前的页已经刷新回磁盘,只需要对checkpoint之后的重做日志进行恢复。这样就大大缩短了恢复时间。

     2 缓冲池不够用或者触发脏页百分比机制,将脏页刷新回磁盘

    缓冲池不够用时,根据LRU算法,溢出最近最少使用的页,如果页为脏页,强制执行checkpoint,将页刷新回磁盘,达到脏页比时候,也会自动触发.

     3 重做日志不可用(不可被重用,不可被覆盖),刷新脏页

    重做日志不可用,是指,重做日志的这部分不可以被覆盖,为什么?因为:这部分对应的数据还未刷新到磁盘上。重做日志的设计是循环使用的。数据库恢复时,如果不需要,即可被覆盖;如果需要,必须强制执行checkpoint,将缓冲池中的页至少刷新到当前重做日志的位置

四  主要工作

    checkpoint:将缓冲池中的脏页刷回到磁盘。

五 刷新方式

InnoDB存储引擎内部,两种checkpoint,分别为:
  • Sharp Checkpoint  适用于数据库关闭时的一致性刷新 (数据库关闭时 触发)
  • Fuzzy Checkpoint  适用于数据库运行时的部分页刷新 (数据库运行时周期性触发)

六 数据库关闭方式参数讲解

 在关闭时,参数innodb_fast_shutdown影响着表的存储引擎为InnoDB的行为。该参数可取值为0、1、2。

  1. 0代表当mysql关闭时,InnoDB需要完成所有的full purge和merge insert buffer操作,这会需要一些时间,有时甚至需要几个小时来完成。如果在做InnoDB plugin升级,通常需要将这个参数调为0,然后再关闭数据库。
  2. 1是该参数的默认值,表示不需要完成上述的full purge和merge insert buffer操作,但是在缓冲池的一些数据脏页还是会刷新到磁盘。
  3. 2表示不完成full purge和merge insert buffer操作,也不将缓冲池中的数据脏页写回磁盘,而是将日志都写入日志文件。这样不会有任何事务会丢失,但是MySQL数据库下次启动时,会执行恢复操作(recovery)

 可以发现,设置shutdown级别也会影响着checkpoint的操作,比如Sharp Checkpoint 不会在=2的情况下触发

 

以上是关于mysql 原理 ~ checkpoint的主要内容,如果未能解决你的问题,请参考以下文章

[Spark內核] 第41课:Checkpoint彻底解密:Checkpoint的运行原理和源码实现彻底详解

Flink CheckPoint奇技淫巧 | 原理和在生产中的应用

Checkpoint的运行原理和源码实现

Spark内核源码解析十四:checkpoint原理剖析

flink学习day05:checkpoint 原理与实践

Flink1.13 Checkpoint原理