如何利用docker快速构建MySQL主从复制环境

Posted SlowTech

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了如何利用docker快速构建MySQL主从复制环境相关的知识,希望对你有一定的参考价值。

在学习mysql的过程中,常常会测试各种参数的作用。这时候,就需要快速构建出MySQL实例,甚至主从。

 

考虑如下场景:

譬如我想测试mysqldump在指定--single-transaction参数的情况下,对于myisam表的影响。

本来想在现成的测试环境中进行,但测试环境中,有大量的数据,执行mysqldump进行全备,产生的SQL文件,很难基于表进行搜索。

这个时候,就特别渴望能有一套干净的实例进行测试。

 

此刻,快速构建能力就显得尤为必要,很多童鞋可能会问,通过脚本不就能实现么?为什么要用docker?

个人感觉:脚本太重,会涉及很多额外的工作,譬如创建用户,相对较长的数据库初始化过程,MySQL启动过程,而我需要的是一种快速构建,快速销毁的能力。

而这,正是Docker的强项。

 

如下,是利用docker启动一个实例的时间,不到1s,如果使用脚本来做的话,绝不会这么快。

# time  docker run --name slave -v /etc/slave.cnf:/etc/mysql/my.cnf -v /var/lib/mysql/slave:/var/lib/mysql -p3307:3306 -e MYSQL_ROOT_PASSWORD=123456 -d mysql:5.6.34
6b7fe5da9e8c77529ee634e163add57db5cd15757e88261ce320a502ae01f853 real 0m0.986s user 0m0.026s sys 0m0.018s

 

于是基于docker写了个脚本,可在30s左右新建一套MySQL主从复制环境

#!/bin/bash

MASTER_DIR=/var/lib/mysql/master
SLAVE_DIR=/var/lib/mysql/slave

## First we could rm the existed container
docker rm -f master
docker rm -f slave

## Rm the existed directory
rm -rf $MASTER_DIR
rm -rf $SLAVE_DIR

## Start instance
docker run --name master -v /etc/master.cnf:/etc/mysql/my.cnf -v $MASTER_DIR:/var/lib/mysql  --net=host -e MYSQL_ROOT_PASSWORD=123456 -d mysql:5.6.34
docker run --name slave -v /etc/slave.cnf:/etc/mysql/my.cnf -v $SLAVE_DIR:/var/lib/mysql --net=host -e MYSQL_ROOT_PASSWORD=123456 -d mysql:5.6.34
## Creating a User for Replication
docker stop master slave
docker start master slave

sleep 3

docker exec -it master mysql -S /var/lib/mysql/mysql.sock -e "CREATE USER ‘repl‘@‘127.0.0.1‘ IDENTIFIED BY ‘repl‘;GRANT REPLICATION SLAVE ON *.* TO repl@127.0.0.1;"
## Obtaining the Replication Master Binary Log Coordinates master_status=`docker exec -it master mysql -S /var/lib/mysql/mysql.sock -e "show master status\G"` master_log_file=`echo "$master_status" | awk NR==2{print substr($2,1,length($2)-1)}` master_log_pos=`echo "$master_status" | awk NR==3{print $2}` master_log_file="""$master_log_file""" ## Setting Up Replication Slaves docker exec -it slave mysql -S /var/lib/mysql/mysql.sock -e "CHANGE MASTER TO MASTER_HOST=‘127.0.0.1‘,MASTER_PORT=3306,MASTER_USER=‘repl,MASTER_PASSWORD=repl,MASTER_LOG_FILE=$master_log_file,MASTER_LOG_POS=$master_log_pos;"docker exec -it slave mysql -S /var/lib/mysql/mysql.sock -e "start slave;" docker exec -it slave mysql -S /var/lib/mysql/mysql.sock -e "show slave status\G" ## Creates shortcuts grep "alias master" /etc/profile if [ $? -eq 1 ];then echo alias mysql="docker exec -it master mysql" >> /etc/profile echo alias master="docker exec -it master mysql -h 127.0.0.1 -P3306" >> /etc/profile echo alias slave="docker exec -it master mysql -h 127.0.0.1 -P3307" >> /etc/profile source /etc/profile fi

 

脚本本身没有太多需要说明的地方,主从容器起来后,遵循的还是常见的主从复制建立流程。

主要是说说创建容器所涉及的选项。

docker run --name master -v /etc/master.cnf:/etc/mysql/my.cnf -v $MASTER_DIR:/var/lib/mysql  --net=host -e MYSQL_ROOT_PASSWORD=123456 -d mysql:5.6.34

 -v /etc/master.cnf:/etc/mysql/my.cnf:将本地的配置文件映射成容器的配置文件,这样,可通过修改本地配置文件,来达到修改容器配置文件的效果。

 -v $MASTER_DIR:/var/lib/mysql :将本地目录映射成容器的数据目录,这样,方便查看数据目录的内容,不然的话,就默认保存在/var/lib/docker/volumes目录下,实在不方便查看。

 --net=host:共享宿主机的网络,大大降低容器之间的通信复杂度。

 

注意

在脚本刚开始的时候,会删除之前的容器,这包含两步操作

1. 通过docker命令删除容器

2. 通过操作系统命令删除之前容器的数据目录。

    如果不删除的话,再次通过如下命令创建容器时,并不会清空之前的数据目录,而是直接加载,相当于新启了一个mysqld进程启动之前的实例。

docker run --name master -v /etc/master.cnf:/etc/mysql/my.cnf -v $MASTER_DIR:/var/lib/mysql  --net=host -e MYSQL_ROOT_PASSWORD=123456 -d mysql:5.6.34

    这也给我们提供了一个思路,如果只是想测试参数的作用,并不想新建实例的话,只需通过docker命令删除容器,修改配置文件,通过上述命令创建容器即可。

 

在启动实例后,执行了一个重启实例的操作,因为在测试的过程中,发现如果执行docker exec -it master bash之类的操作,会导致容器down掉(具体down的原因还未分析),但是重启实例后就没问题。

docker stop master slave
docker start master slave

sleep 3

 

设置快捷键

mysql:mysql客户端,可以通过该客户端连接其它主机上的MySQL服务器。

master:执行master即可登录本机的master实例,省掉了指定主机名和端口的操作。

salve:执行slave即可登录本机的slave实例。



以上是关于如何利用docker快速构建MySQL主从复制环境的主要内容,如果未能解决你的问题,请参考以下文章

借力 Docker ,三分钟搞定 MySQL 主从复制!

利用MySQL主从复制延迟拯救误删数据

Docker实战之MySQL主从复制

基于Docker搭建MySQL主从复制

基于Docker搭建MySQL主从复制

基于Docker搭建MySQL主从复制