迁移 RDS for MySQL 数据到本地 MySQL

Posted 2020-09-10

背景

 公司的业务系统采用阿里云的RDS云数据库，最近有一个需求：迁移 RDS for MySQL 数据到本地 MySQL。阿里云数据库 MySQL 版支持通过物理备份文件和逻辑备份文件两种途径将云上数据迁移到本地数据库。我公司采用mysql5.6版，备分策略是自动全量物理备份。本地系统是Centos 6.8 X64，此教程提供两种方法，任选其一即可。

备注：因为软件限制，目前数据恢复只支持在 Linux 系统下进行。如果您要恢复数据到 Windows 系统，可以先将数据恢复到 Linux 系统下，再将数据迁移到 Windows 系统。

方法一：

前提条件

阿里云数据库使用开源软件 Xtrabackup 对 mysql 数据库进行全量物理备份。用户需要下载该软件，并使用该软件进行数据恢复。Xtrabackup 官方网站为：http://www.percona.com/，请下载与您操作系统版本对应的 Xtrabackup 版本。例如：下载 RHEL6/x86_64 版本，并使用 rpm 命令进行安装。

rpm -ivh percona-xtrabackup-24-2.4.6-2.el6.x86_64.rpm

 

在进行RDS本地恢复数据之前，我们需要先在本地服务器上安装mysql的5.6版本，因为RDS是5.6版本，所以我们本地的mysql数据库要与RDS版本对应。

rpm -ivh http://repo.mysql.com/mysql-community-release-el6-5.noarch.rpm && yum -y install mysql-server mysql

 

操作步骤

本例以本地服务器为Centos6.8/x64 系统，备份文件存储路径为 /home/mysql/ 为例。

下载云数据库 物理备份文件 并上传至目标服务器。备份文件获取方法请参见 下载备份数据。如果目标服务器可以访问源实例，您也可以使用 wegt "url" 下载备份文件。

其中 url 为备份文件下载地址。

 

切换路径到备份文件所在路径。

cd /home/mysql/

 

解压备份文件。

tar -zxvf hins2230233_data_20170331110337.tar.gz

 

检查解压后文件包含的数据库是否正确。蓝色部分都是我公司所用数据库。

 

恢复数据文件

innobackupex --defaults-file=./backup-my.cnf --apply-log ./

系统显示 innobackupex: completed OK!，则数据恢复成功。

 

修改配置文件。将解压文件 backup-my.cnf 中的 innodb_fast_checksum、innodb_page_size、innodb_log_block_size 注释掉，并且添加 datadir=/home/mysql，如下所示。

 

# This MySQL options file was generated by innobackupex.
# The MySQL server   
[mysqld]    
innodb_data_file_path=ibdata1:200M:autoextend    
innodb_log_files_in_group=2    
innodb_log_file_size=524288000    
#innodb_fast_checksum=false    
#innodb_page_size=16384    
#innodb_log_block_size=512    
datadir=/home/mysql

 

复制backup-my.cnf 文件到/etc/my.cnf，mysql启动默认会去/etc目录下查找此文件

cp  backup-my.cnf  /etc/my.cnf

 

修改文件属主。

chown -R mysql:mysql /home/mysql/

 

启动 mysqld 进程。

mysqld_safe &

 

使用客户端登录数据库。此时数据库root没有密码

mysql -h 127.0.0.1 -u root -p

 

验证数据库是否完整。

 

show databases;

 

注：此教程和阿里云上面的教程有些不同

1.  阿里云上面有删除mysql系统库并重装mysql系统库的过程，此处没有。本人按照阿里云的方法重装系统库时有报错。

删除mysql系统库

rm -rf mysql

重装 MySQL 系统库，取得数据库的 root 权限。

mysql_install_db --user=mysql --datadir=/home/mysql/

2. 数据库登录。阿里云mysql -uroot -p。而此处选择mysql -h 127.0.0.1 -uroot -p

 

 

方法二：

此方法参考了网上的教程，亲测可用，此方法前提条件是只需要安装mysql5.6版本

前提条件

在进行RDS本地恢复数据之前，我们需要先在本地服务器上安装mysql的5.6版本，因为RDS是5.6版本，所以我们本地的mysql数据库要与RDS版本对应。

rpm -ivh http://repo.mysql.com/mysql-community-release-el6-5.noarch.rpm && yum -y install mysql-server mysql

 

RDS备份文件下载完毕后并上传本地服务器，我们需要对其进行解压。按照阿里云官方文档，我们需要下载阿里云专门的脚本进行解压，而且必须是在linux OS 64bit上使用。

必须说明：RDS的备份文件只能在linux OS上进行的。在windows OS上使用第三方软件解压的话，你会发现看不到任何的文件。

下载RDS解压脚本，使用如下命令：

wget http://oss.aliyuncs.com/aliyunecs/rds_backup_extract.sh

 

使用RDS解压脚本，解压RDS备份文件，如下：

sh rds_backup_extract.sh -f /root/hins2230233_data_20170331110337.tar.gz -C /home/mysql

 

检查解压后文件包含的数据库是否正确。蓝色部分都是我公司所用数据库。

 

 

切换到/home/mysql目录并修改文件属主

cd /home/mysql 

chown -R mysql:mysql /home/mysql/

自建mysql配置文件，内容如下:

vim /etc/my.cnf

[mysqld]
datadir = /home/mysql
port = 3306
server_id = 1
socket = /home/mysql/mysqld.sock
max_allowed_packet=32M
[mysqld_safe]   
pid-file=/home/mysql/mysqld.pid    
log-error = /home/mysql/error.log
default-storage-engine=INNODB

 

启动mysql并操作

mysqld_safe &

 

通过上图，我们可以很明显的看出mysql已经正常启动。现在我们再来测试，是否可以正常连接mysql。如下：

mysql -h 127.0.0.1 -u root -p

 

遇到的问题： 我登录数据库之后，执行正常的sql语句，提示错误。

GRANT all privileges on *.* to ‘steven‘@‘%‘IDENTIFIED by ‘123456‘;

[Err] 1558 - Column count of mysql.user is wrong. Expected43, found 42. Created with MySQL 50518, now running 50636. Please usemysql_upgrade to fix this error.

解决方法： mysql_upgrade mysql -h 127.0.0.1 -u root –p

结束，此时你可以随便操作数据库。

本文出自 “技术成就梦想” 博客，请务必保留此出处http://pizibaidu.blog.51cto.com/1361909/1916016