Mysql数据库——MMM架构

Posted 2022-02-21 封玖FJ

MMM的简介

MMM（Master-Master replication manager for MvSQL，mysql主主复制管理器）是一套支持双主故障切换和双主日常管理的脚本程序。MMM 使用 Perl 语言开发，主要用来监控和管理 MySQL Master-Master （双主）复制，虽然叫做双主复制，但是业务上同一时刻只允许对一个主进行写入，另一台备选主上提供部分读服务，以加速在主主切换时备选主的预热，可以说MMM这套脚本程序一方面实现了故障切换的功能，另一方面其内部附加的工具脚本也可以实现多个 Slave 的 read 负载均衡。

MMM工作过程

集群中有monitor管理服务器，两个master服务器和多个从服务器，主服务器之间互相进行数据同步，共用一个VIP，一台提供服务，另一台只提供部分读的服务。从服务器分配不同的VIP并且同步同一台主服务器的数据，当monitor发现主服务器出现故障，将自动调配另一台主服务器提供服务保证业务的不中断，如果从服务器发生故障那该服务器的VIP将漂移到其他从服务器上保证用户依然能对该VIP进行访问。管理员可以通过命令在monitor上对集群服务的状态查询并进行相应的管理。

MMM的应用

MMM提供了自动和手动两种方式移除一组服务器中复制延迟较高的服务器的虚拟ip，同时它还可以备份数据，实现两节点之间的数据同步等。由于MMM无法完全保证数据的一致性，所以MMM适用于对数据的一致性要求不是很高，但是又想最大程度地保证业务可用性的场景。

MMM高可用架构组成

MMM是一套灵活的脚本程序，基于perl实现，用来对 mysql replication 进行监控和故障迁移，并能管理 MySQL Master-Master 复制的配置。

MMM的高可用架构

1. mmm_mon：监控进程，负责所有的监控工作，决定和处理所有节点角色活动。此脚本需要在监控主机上运行

2. mmm_agent：运行在每个MySQL服务器上的代理进程，完成监控的探针工作和执行简单的远端服务设置。此脚本需要在被监管机上运行

3. mmm_control：一个简单的脚本，提供管理mmm_mon进程的命令

4. mysql-mmm的监管端会提供多个虚拟IP（VIP），包括一个可写 VIP，多个可读VIP，通过监管的管理，这些IP会绑定在可用MySQL之上，当某一台MySQL宕机时，监管会将VIP迁移至其他MySQL

5. 在整个监管过程中，需要在MySQL中添加相关授权用户，以便让MySQL 可以支持监控主机的维护。 授权的用户包括一个mmm_monitor用户和一个mmm_agent用户

搭建MySQL MMM

服务器准备

主机ip	角色	组件
192.168.163.11	master01（db1）	mysql5.7、mysql-mmm
192.168.163.12	master02（db2）	mysql5.7、mysql-mmm
192.168.163.13	slave01（db3）	mysql5.7、mysql-mmm
192.168.163.14	slave02（db4）	mysql5.7、mysql-mmm
192.168.163.20	monitor	mysql-mmm

1. 搭建MySQL多主多从模式（2+2）

1) 修改4台数据库配置文件

#关闭防火墙和安全功能
systemctl stop firewalld 
systemctl disable firewalld
setenforce 0

vim /etc/my.cnf
......
[mysqld]
user = mysql
basedir = /usr/local/mysql
datadir = /usr/local/mysql/data
port = 3306
character_set_server=utf8
pid-file = /usr/local/mysql/mysqld.pid
socket = /usr/local/mysql/mysql.sock
server-id = 1/2/3/4                              #每台 Mysql 主机的 server-id 不能相同
log-error=/usr/local/mysql/data/mysql_error.log  #错误日志
general_log=ON                                   #通用查询日志
general_log_file=/usr/local/mysql/data/mysql_general.log
slow_query_log=ON                                #慢查询日志
slow_query_log_file=mysql_slow_query.log
long_query_time=5
binlog-ignore-db=mysql,information_schema        #不需要同步的库名
log_bin=mysql_bin                                #开启二进制日志用于主从数据复制
log_slave_updates=true                           #允许slave从master复制数据时可以写入到自己的二进制日志
sync_binlog=1                            #"双1设置"，MySQL 在每写一次二进制日志时都会同步到磁盘中去    
innodb_flush_log_at_trx_commit=1         #"双1设置"，每次事务提交时MySQL都会把缓存的数据写入日志文件，并且刷到磁盘中去
auto_increment_increment=2               #自增字段一次递增多少
auto_increment_offset=1                  #自增字段的起始值

systemctl restart mysqld

#把配置文件复制到其它 3 台数据库服务器上并启动服务器，注意：配置文件中的 server_id 要修改
scp /etc/my.cnf root@192.168.163.12:/etc/
scp /etc/my.cnf root@192.168.163.13:/etc/
scp /etc/my.cnf root@192.168.163.14:/etc/
systemctl restart mysqld

2) 配置主主复制

#在两台主服务器上都执行授予从的权限，从服务器上不需要执行
mysql -uroot -p123456
grant replication slave on *.* to replication@192.168.163.% identified by 123456;

#在两台主服务器上查看，记录日志文件名称和同步点
show master status;

3) 在两台主节点相互配置同步

#在master01上配置同步
1.change master to master_host=192.168.163.12,master_user=replication,master_password=123456,master_log_file=mysql_bin.000001,master_log_pos=461;

2.start slave; 

3.show slave status\\G
显示Slave_IO_Running: Yes
  Slave_SQL_Running: Yes

#在master02上配置同步
1.change master to master_host=192.168.163.11,master_user=replication,master_password=123456,master_log_file=mysql_bin.000001,master_log_pos=461;

2.start slave; 

3.show slave status\\G
显示Slave_IO_Running: Yes
  Slave_SQL_Running: Yes

4) 配置主从复制，在两台从服务器上做

#在两台从服务器上做，配置一样
1.change master to master_host=192.168.163.11,master_user=replication,master_password=123456,master_log_file=mysql_bin.000001,master_log_pos=461;

2.start slave;

3.show slave status\\G
    Slave_IO_Running: Yes
    Slave_SQL_Running: Yes

5) 测试主主、主从同步情况

create database test;
use test;
create table test(id int,name char(10));
insert into test values(1,aa);
insert into test values(2,bb);
select * from test;

2. 安装配置MySQL-MMM

1) 所有服务器上安装MySQL-MMM

wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo
yum -y install epel-release
yum -y install mysql-mmm*

2) 5台服务器对MySQL-MMM进行配置

在 master01 上对 MySQL-MMM 进行配置
cd /etc/mysql-mmm/
vim mmm_common.conf
……
<host default>
    cluster_interface       ens33
    ……
    replication_user        replication
    replication_password    123456
    agent_user              mmm_agent
    agent_password          123456

<host db1>
    ip      192.168.163.11
    mode    master
    peer    db2
</host>

<host db2>
    ip      192.168.163.12
    mode    master
    peer    db1
</host>

<host db3>
    ip      192.168.163.13
    mode    slave
</host>

<host db4>
    ip      192.168.163.14
    mode    slave
</host>

<role writer>
    hosts   db1, db2
    ips     192.168.163.30
    mode    exclusive           #只有一个 host 可以进行写操作模式
</role>

<role reader>
    hosts   db3, db4
    ips     192.168.163.40, 192.168.163.50
    mode    balanced            #多个 slave 主机可以进行读操作模式
</role>

把配置文件复制到其它 4 台主机，所有主机该配置文件内容都是一样的
scp mmm_common.conf root@192.168.163.12:/etc/mysql-mmm/
scp mmm_common.conf root@192.168.163.13:/etc/mysql-mmm/
scp mmm_common.conf root@192.168.163.14:/etc/mysql-mmm/
scp mmm_common.conf root@192.168.163.20:/etc/mysql-mmm/

3) 修改所有数据库服务器的代理配置文件mmm_agent.conf

vim /etc/mysql-mmm/mmm_agent.conf
include mmm_common.conf
this db1                #根据不同的主机分别修改为 db1,db2,db3,db4

4) 在monitor监控服务器上修改监控配置文件mmm_mon.conf

#在 monitor 监控服务器上修改监控配置文件 mmm_mon.conf
vim /etc/mysql-mmm/mmm_mon.conf
include mmm_common.conf
<monitor>
.....
    ping_ips            192.168.163.11,192.168.163.12,192.168.163.13,192.168.163.14    #指定所有数据库服务器的 IP
    auto_set_online     10              #指定自动上线时间
</monitor>

<host default>
    monitor_user        mmm_monitor     #指定 mmm_monitor 的用户名
    monitor_password    123456          #指定 mmm_monitor 的密码
</host>

5) 在所有数据库上授权

#在所有数据库上为 mmm_agent（代理进程）授权
mysql -uroot -p123456
grant super, replication client, process on *.* to mmm_agent@192.168.163.% identified by 123456;

#在所有数据库上为 mmm_moniter（监控进程）授权
grant replication client on *.* to mmm_monitor@192.168.163.% identified by 123456;

flush privileges;

6) 在所有数据库服务器上启动 mysql-mmm-agent

systemctl start mysql-mmm-agent.service
systemctl enable mysql-mmm-agent.service

7) monitor服务器上启动mysql-mmm-monitor

systemctl start mysql-mmm-monitor.service  

3. 在monitor服务器上测试群集

#查看各节点的情况
mmm_control show

#检测监控功能是否都完善，需要各种OK
mmm_control checks all

#指定绑定 VIP 的主机
mmm_control move_role writer db2

4. 故障测试

1) 停止master01确认VIP是否移动到master02上，master01主服务器恢复服务后，不会抢占

mmm_control move_role writer db1
#停止 master01 确认 VIP 是否移动到 master02 上。注意：master01 主服务器恢复服务后，不会抢占

2) 停止一台从服务器，另一台将接管两个虚拟IP，以保证业务不停止

mmm_control show
db1(192.168.163.11) master/HARD_OFFLINE. Roles:
db2(192.168.163.12) master/ONLINE. Roles: writer(192.168.163.22)

#停止一台从服务器，另一台将接管两个虚拟IP，以保证业务不停止
mmm_control show

5. 客户端测试

1）在master01服务器上为monitor服务器地址授权登录

grant all on *.* to mmm_agent@192.168.163.20 identified by 123456;
flush privileges;

2）在monitor服务器上使用VIP登录

yum install -y mariadb-server mariadb
systemctl start mariadb.service

mysql -uroot -p123456 -h 192.168.163.20

3）创建数据，测试同步情况

insert into test.test values(3,ccc);
select * from test.test;

在其他数据库查看
select * from test.test;