MySQL 大表迁移

Posted Cami.Luo

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了MySQL 大表迁移相关的知识,希望对你有一定的参考价值。

一、需求分析

线上100G 大表 table1 迁移,从DB1 迁移到DB2。

 

二、环境要求:

1.mysql 使用InnoDB 存储引擎,且开启独立表空间;

2.两个库的MySQL版本一致(未做不同版本测试)。

 

三、操作详情:

1.导出DB1 中table1 的表结构SQL到DB2中;

2.卸载DB2 中table1 的表空间;

alter table table1 discard tablespace;

如果是卸载DB1整个库可以这样操作:

SELECT CONCAT(‘ALTER TABLE ‘, TABLE_NAME, ‘ discard tablespace;‘) FROM INFORMATION_SCHEMA.TABLES WHERE TABLE_SCHEMA = ‘DB2‘ and TABLE_TYPE like ‘%TABLE%‘ ;

把这条语句查询结果导出为sql文件,然后在 DB2 中执行这个sql文件,执行完毕则使 DB2 库所有表空间已卸载;
3.复制DB1原表的物理文件table.ibd到DB2中,修改属主属组
chown -R mysql.mysql /dest/dir/table.ibd
 
4.在DB2重新装载table1 的tablespace;
alter table table1 import tablespace;
 
 
root@localhost 17:18:  [test]> alter table table1 import tablespace;
Query OK, 0 rows affected, 1 warning (0.08 sec)

root@localhost 17:18:  [test]> show warnings;
+---------+------+--------------------------------------------------------------------------------------------------------------------------------------------------------------+
| Level   | Code | Message                                                                                                                                                      |
+---------+------+--------------------------------------------------------------------------------------------------------------------------------------------------------------+
| Warning | 1810 | InnoDB: IO Read error: (2, No such file or directory) Error opening ./test/sc_akucun_consume_copy1.cfg, will attempt to import without schema verification |
+---------+------+--------------------------------------------------------------------------------------------------------------------------------------------------------------+
1 row in set (0.00 sec)

 

 

 

以上是关于MySQL 大表迁移的主要内容,如果未能解决你的问题,请参考以下文章

将大表从 MySql 迁移到 MsSql

Oracle数据迁移MySQL

大表DROP删除小技巧

使用 LOB 数据迁移大表的挑战

使用MySQL传输表空间迁移数据

spark 实现大表数据合并