mysql迁移之巨大数据量快速迁移方案

Posted chenjianwen

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了mysql迁移之巨大数据量快速迁移方案相关的知识,希望对你有一定的参考价值。

mysql迁移之巨大数据量快速迁移方案-增量备份及恢复

--chenjianwen

一、前言:

  当mysql库的大小达到几十个G或者上百G,迁移起来是一件非常费事的事情,业务中断,导出导入耗费大量的时间;所以,需要考虑怎么去节省时间的问题。

二、方案:

  1.制定维护时间,中断业务,登录 mysql,刷新日志

  2.全备数据,备份后得到 binlog 日志文件 mysql-bin.000001

  3.迁移走之前的 binlog 日志文件,只留下 mysql-bin.000001

  4.恢复业务

  5.将全备得到得 sql 大数据文件导入新库中【期间消耗大量时间】

  6.制定正式迁移时间,停止业务

  7.通过现在的 mysql-bin.000001 获取期间增量的数据 mysql-000001.sql

  8.将 mysql-000001.sql 直接导入到新库中

  9.修改业务连接mysql配置,启动服务

三、优点

  1.大大减少了导入新库所需要的时间,相当于减少了业务中断的时间

四、详细实施步骤

  1.

以上是关于mysql迁移之巨大数据量快速迁移方案的主要内容,如果未能解决你的问题,请参考以下文章

Kettle--MySQL生产数据库千万亿级数据量迁移方案及性能优化

Kettle--MySQL生产数据库千万亿级数据量迁移方案及性能优化

MYSQL千万级别数据量迁移Elasticsearch5.6.1实战

redis数据迁移

ClickHouse 大数据量的迁移方式

分库分表这样玩,可以永不迁移数据避免热点