mysql 主从同步 与 半同步

Posted 2021-01-29

mysql主从同步复制定义

主从同步使得数据可以从一个数据库服务器复制到其他服务器上，在复制数据时，一个服务器充当主服务器（master），其余的服务器充当从服务器（slave）。通过配置文件，可以指定复制所有的数据库，某个数据库，甚至是某个数据库上的某个表。

使用主从同步的好处：

1. 通过增加从服务器来提高数据库的性能，在主服务器上执行写入和更新，在从服务器上向外提供读功能，可以动态地调整从服务器的数量，从而调整整个数据库的性能。

2. 提高数据安全-因为数据已复制到从服务器，从服务器可以终止复制进程，所以，可以在从服务器上备份而不破坏主服务器相应数据

3. 在主服务器上生成实时数据，而在从服务器上分析这些数据，从而提高主服务器的性能

   半同步复制 ---- 解决数据丢失的问题
   并行复制 ---- 解决从库复制延迟的问题

主从复制--异步复制原理：

半同步复制原理：

配置主从同步

有很多种配置主从同步的方法，可以总结为如下的步骤：

1．主、从服务器都开启二进制模块功能，每台服务器都有独立的 ID 不可重复

2．修改 从服务器的 UUID不可相同

3．按照该配置文件，在从服务器上建立相关的 目录

4．同步主服务器的数据内容，分别同步到各个从服务器中（所有服务器的数据保持一致性）

5．查看二进制文件所在的位置和名称，以便主从同步数据一致

一、配置主服务器

1、添加二进制模块，并创建对应的目录

[[email protected] mysql]# vim /etc/my.cnf
    ......
log-bin=/data/binmysql/mysql-bin
server-id=1
    ......

[[email protected] ~]# mkdir /data/binmysql
[[email protected] ~]#chown  mysql:mysql -R  /data/binmysql 

2、创建数据库的用户,授权可以进行复制、操作的账户：

启动数据库，进入数据库。创建用户 “mary“ 密码 “123123” ，授权给 192.168.10.% 段的 ip，并刷新时期生效

[[email protected] mysql]# /usr/local/mysql57/support-files/mysql.server start
[[email protected] mysql]# /usr/local/mysql57/bin/mysql -uroot
Mysql>  grant all on *.* to ‘mary‘@‘192.168.10.%‘  identified by “123123”;
Mysql>  flush privileges;

查看是否生效：

mysql> select host,user from mysql.user;
+--------------+---------------+
| host         | user          |
+--------------+---------------+
| 192.168.10.% | mary          |
| 192.168.10.% | root          |
| localhost    | mysql.session |
| localhost    | mysql.sys     |
| localhost    | root          |
+--------------+---------------+
5 rows in set (0.25 sec)

mysql> 

3、备份数据，复制数据到从服务器中

利用 innobackupex 备份或者 LVM 快照备份

4、查看当前的二进制文件

当前二进制文件名字为 000026 位置已到 797 ；

mysql> show master status;
| File             | Position |
| mysql-bin.000026 |      797 |  

二、配置从服务器

1、复制配置文件到从服务器，检查是否开启二进制文件，修改配置文件中的 ID 和 UUID（UUID不一致可以不用改）

[[email protected] ~]# scp /etc/my.cnf 192.168.10.15:/etc/
[[email protected] ~]# vim /etc/my.cnf
    ......
log-bin=/data/binmysql/mysql-bin
server-id=2
    ......

[[email protected] ~]# mkdir /data/binmysql
[[email protected] ~]# chown  mysql:mysql  /data/binmysql

[[email protected] ~]# vim /mysql/auto.cnf 
[auto]
server-uuid=0c45e903-c4c4-11e8-8fa1-000c296bd14d

2、 登录从服务器的 mysql 客户端

mysql> stop slave;
mysql> reset slave;
mysql> change master to master_host=‘192.168.10.10‘,master_user=‘mary‘,master_password=‘123123‘,master_log_file=‘mysql-bin.000026‘,master_log_pos=797;  

mysql> start slave;    #开始启动从服务器功能

3、 查看从服务器信息

mysql> show slave status  G;

4、测试观察，在主服务器中插入数据，在从服务器上进行察看

注意：从数据库只能读，并不能写。

mysql 半同步复制

1.当Slave主机连接到Master时，能够查看其是否处于 半同步复制的机制。
2.当Master上开启半同步复制的功能时，至少应该有一个Slave开启其功能

同步（社区增强半同步），异步，半同步复制的比较：

1. 同步复制：Master提交事务，直到事务在所有的Slave都已提交，此时才会返回客户端，事务执行完毕。缺点：完成一个事务可能会有很大的延迟。

2. 异步复制：当Slave准备好才会向Master请求binlog。缺点：不能保证一些事件都能够被所有的Slave所接收。

3. 半同步复制：半同步复制工作的机制处于同步和异步之间，Master的事务提交阻塞，只要一个Slave已收到该事务的事件且已记录。它不会等待所有的Slave都告知已收到，且它只是接收，并不用等其完全执行且提交 ... 所以，半同步复制最好在低延时的网络中使用
   

开启半同步复制

在主服务器节点上安装相关的插件（在配置文件上添加相关的模块）

[[email protected] mysql]# vim /etc/my.cnf

plugin-load=rpl_semi_sync_master=semisync_master.so
rpl_semi_sync_master_enabled=1 

重启服务，察看

在从服务器节点上安装相关的插件（在配置文件上添加相关的模块）

[[email protected] mysql]# vim /etc/my.cnf

plugin-load=rpl_semi_sync_slave=semisync_slave.so
rpl_semi_sync_slave_enabled=1 

重启服务，察看

测试观察

主服务器在线，所有从服务器离线，
此时向主服务器插入数据，观察。。。

mysql> stop slave;
Query OK, 0 rows affected (0.31 sec)

插入数据花了 整整 10s

当再次插入数据的时候；或者在从服务器恢复半同步复制。再次观察，没有了延时

mysql> start slave;
Query OK, 0 rows affected (0.31 sec)

GTID 的工作原理

1、当一个事务在主库端执行并提交时，产生GTID，一同记录到 主 的 binlog日志中。
2、binlog传输到slave,并存储到slave的 relaylog后，读取这个GTID的这个值设置gtid_next变量，即告诉Slave，下一个要执行的GTID值。
3、从服务器的 sql线程从relay log 中获取GTID，然后对比 slave 自己的 binlog 是否有该 GTID。
4、如果有记录，说明该GTID的事务已经执行，slave会忽略。
5、如果没有记录，slave就会执行该 GTID事务，并记录该 GTID 到自身的 binlog，在读取执行事务前会先检查其他session持有该GTID，确保不被重复执行。
6、在解析过程中会判断是否有主键，如果没有就用二级索引，如果没有就用全部扫描。

GTID 的优势

1、更简单的实现failover，不用以前那样在需要找 log_file 和 log_pos。
2、更简单的搭建主从复制。
3、比传统的复制更加安全。
4、GTID是连续的没有空洞的，保证数据的一致性，零丢失。

配置 master 节点

[[email protected] mysql]# vim /etc/my.cnf
log-slave-updates=on
gtid-mode=on
enforce-gtid-consistency=ON

配置 slave 节点

[[email protected] mysql]# vim /etc/my.cnf
gtid-mode=ON
enforce-gtid-consistency=ON
log-slave-updates=ON
MASTER_AUTO_POSITION=1

设置指点服务器

在slave从服务器上设置将从服务器指向主服务器，并启动复制线程：

mysql> CHANGE MASTER TO MASTER_HOST=‘192.168.10.71‘, MASTER_USER=‘mary‘, MASTER_PASSWORD=‘123123‘, MASTER_AUTO_POSITION=1;
mysql> start slave;
mysql> show slave status G;

支持 GTID 模式

同时支持 半同步复制