mysql主从同步

Posted 2021-05-17 Covers

mysql主从同步 (同步方法)

1. NFS网络文件共享可以同步存储数据

2. samba共享数据

3.定时任务或守护进程rsync、scp

4.inotify+rsync 触发式实时数据同步

5.ftp数据同步

6.ssh key+scp/rsync

7.svn版本管理

同步类型:

1. 单向主从同步 Master--->slave  (可一主多从)

2. 双向主从同步 Master<--->Master

3. 线性级联单项主从同步 Master--->Master--->slave

4. 环状级联单项多主同步 Master-->Master-->Master

5. 环状级联单项多主多从同步 s1--Master-->Master-->Master-->s2

防止从库写入数据,采取忽略授权表方式同步,对从服务器上的用户仅授权select读权限

主库:grant select,insert,update,delete on blog.* to \'blog\'@\'192.168.1.%\' identified by \'chengye123\';

从库:grant select on blog.* to \'blog\'@\'192.168.1.%\' identified by \'chengye123\';

在slave上my.cnf中加入read-only

实现mysql主从读写分离:

1. 通过程序实现读写分离

2. 通过软件实现读写分离,mysql-proxy，amoeba等代理软件

Mysql主从同步原理:异步的同步过程(感觉实时同步)

从库生成两个线程,一个I/O线程,一个SQL线程;I/O线程去请求主库的binlog,并将得到的binlog日志写到relay log(中继日志)文件中;主库会生成一个log dump线程,用来给从库 i/o线程传binlog；

从库先由:1.锁表 2.记录当前binlog位置信息 3.到出所有数据 4.解锁

主库宕机,从库接管,主库正常运行,把所有数据到会从库,再由主库写入,同步从库

主从形式

1. 一主一从

2. 一主多从--扩展系统读取性能

3. 多主一从--5.7开始支持

4. 主主复制

5. 联级复制

用途：实时灾备的故障切换，读写分离，备份

原理: 主：log dump线程传binlog；从:i/o线程接受读取binlog，并写入relay log文件,sql线程从relay log 文件中读取binlog并持久化

问题及解决:

1. 主库宕机后，数据丢失

半同步复制

2. 主库写压力大，因从库只有一个sql 线程来持久化，复制可能延迟

并行复制

半同步复制：

原理:事务在主库写完binlog后需要从库返回一个已接受，才放回给客户端;

5.5集成到mysql，以插件的形式存在，需要单独安装

确保事务提交后binlog至少传输到一个从库

不保证从库应用完成这个事务的binlog

性能有一定的降低

网络异常或从库宕机，卡主库，直到超时或从库恢复

并行复制

原理：从库多线程apply binlog

在社区5.6中新增

库级别并行应用binlog，同一个库数据更改还是串行的

5.7版本并行复制基于事务组

部分数据复制

联级复制（常用）

A->B->C

B中添加参数log_slave_updates

B将把A的binlog记录到自己的binlog日志中

复制的监控

show slave status

复制出错处理

常见：1062（主键冲突），1032（记录不存在）

解决：手动处理;跳过复制错误：set global sql_slave_skip_counter=1

配置:

主库 192.168.1.19  3306 

从库 192.168.1.19  3307

从库 192.168.1.19  3308