6MySQL 主从同步 MySQL 读写分离 MySQL 性能调优

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了6MySQL 主从同步 MySQL 读写分离 MySQL 性能调优相关的知识,希望对你有一定的参考价值。

day06
一、mysql主从同步
二、数据读写分离
三、MySQL优化
++++++++++++++++++++++++++++++++
一、mysql主从同步
1.1 主从同步介绍?从库服务器自动同步主库上数据(被客户端访问的数据库服务器做主库服务器)
1.2 结构

              54                 55

systemctl start mysqld systemctl start mysqld
主master数据库服务器 从slave数据库服务器

1.3 配置主从同步结构?
1.3.1主库角色主机的配置
1 用户授权
mysql> grant replication slave on . to [email protected]"192.168.4.55" identified by "123456";

2 启用binlog日志
10 vim /etc/my.cnf
server_id=54
log-bin=master54
binlog-format="mixed"
:wq
3 重启数据库服务器
11 systemctl stop mysqld
12 systemctl start mysqld
13 ls /var/lib/mysql/master54.*

4 查看正在使用binlog日志文件。

mysql -uroot -p123456

mysql> show master status;

1.3.2从库角色主机的配置?
1 显示自己是否是从数据库服务器
mysql> show slave status;

2 测试主库授权的用户是否有效
#mysql -h192.168.4.54 -uyaya -p123456
mysql> show grants;
mysql> quit

3 修改配置文件指定server_id
#vim /etc/my.cnf
[mysqld]
server_id=55
:wq
#systemctl restart mysqld

4 在本机数据管理员登录指定主库信息。
mysql> change master to
-> master_host="192.168.4.54",
-> master_user="yaya",
-> master_password="123456",
-> master_log_file="master54.000001",
-> master_log_pos=154;
Query OK, 0 rows affected, 2 warnings (0.35 sec)
mysql> start slave;
mysql> show slave status\G;
Slave_IO_Running: Yes
Slave_SQL_Running: Yes

验证主从同步配置:结果
客户端连接主库服务器 产生的新数据,在从角色的主机上都能够查看到。

+++++++++++++++++++++++++++++++
主从工作原理?
IO线程: 把master 库的 binlog日志内容 记录到本机的relay-binlog日志里。

SQL线程:执行本机relay-binlog日志里的sql命令 把数据写进本机的库。

从角色主机的数据库目录下会多出如下文件:
master.info 存储主数据库的信息
slave55-relay-bin.XXXXXX
中继日志文件 记录本机产生新数据的sql命令
slave55-relay-bin.index 中继日志文件索引文件
relay-log.info 记录当前数据库服务器使用的中继日志文件

主从同步配置排错?
IO线程报错: 从库指定主库的信息错误;
安全限制(firewall selinux)

查看报错信息:
Last_IO_Error: 报错信息

mysql> stop slave;
mysql> change mstart to 选项=值;
mysql> start slave;

SQL线程报错: 执行中继日志里的sql命令时,命令操作的库或表在本机不存在。

查看报错信息:
Last_SQL_Error: 报错信息
mysql> stop slave;
在从本机有命令操作的库或表
mysql> start slave;

++++++++++++++++++++++++++++
让从数据库临时不同步主库的数据?
mysql> stop slave;

把从库 还原成独立的数据库服务器?
#rm -rf master.info slave55-relay-bin.* relay-log.info
#systemctl restart mysqld

mysql> show slave status;

主从同步结构模式?
一主一从
一主多从

主从从
互为主从(主主结构)

reset master #清空主的日志
reset slave #只清空日志
reset slave all #需要重新配置change master

++++++++++++++++++++++++++++++++++++
主从同步常用配置参数?(/etc/my.cnf)
主库角色主机的配置参数
[mysqld]
binlog_do_db=数据库名,数据库名 #只允许同步的库binlog_ignore_db=数据库名,数据库名 #只不允许同步的库

mysql> show master stauts;

从库角色主机的配置参数
[mysqld]
log_slave_updates 级联复制
replicate_do_db=数据库名,数据库名 #只同步的库
replicate_ignore_db=数据库名,数据库名 #只不同步的库relay_log=文件名 #设置中继日志文件名称
+++++++++++++++++++++++++++++
二、数据读写分离
2.1 读写分离介绍?把客户的查询记录的操作和写数据的操作在不同的数据库服务器上执行。

2.2 为什么要做读写分离? 减轻单台数据库服务器的并发访问压力和提供服务器硬件资源的利用率

2.3 配置数据读写分离 (Maxscale + 主从同步结构)

2.3.1 拓扑结构
client
|
53 maxscale 4010 管理端口 4006 读写分离端口

insert select
写 查
54 55
主 从

2.3.2 配置MySQL一主一从同步结构
2.3.3 配置maxscale (53)
a. 装包
b. 修改配置文件
vim /etc/maxscale.cnf
9 [maxscale]
10 threads=1

18 [server1]
19 type=server
20 address=192.168.4.54
21 port=3306
22 protocol=MySQLBackend
23

25 [server2]
26 type=server
27 address=192.168.4.55
28 port=3306
29 protocol=MySQLBackend

38 [MySQL Monitor]
39 type=monitor
40 module=mysqlmon
41 servers=server1, server2
42 user=scalemon # 监控数据库服务服务的运行状态和主从状态
43 passwd=123456
44 monitor_interval=10000

66 [Read-Write Service]
67 type=service
68 router=readwritesplit
69 servers=server1, server2
70 user=maxscale #检查接收客户端连接请求时,连接的用户名和密码在数据库服务器上是否存在
71 passwd=123456
72 max_slave_connections=100%

78 [MaxAdmin Service]
79 type=service
80 router=cli

94 [Read-Write Listener]
95 type=listener
96 service=Read-Write Service
97 protocol=MySQLClient
98 port=4006

100 [MaxAdmin Listener]
101 type=listener
102 service=MaxAdmin Service
103 protocol=maxscaled
104 socket=default
105 port=4010

根据配置文件的设置在数据库服务器上添加对应的授权用户。
mysql> grant replication slave, replication client on . to [email protected]‘%‘ identified by

"123456";

mysql> grant select on mysql.* to [email protected]‘%‘ identified by "123456";

c. 启动服务

systemctl stop mysqld

[[email protected] ~]# maxscale -f /etc/maxscale.cnf
[[email protected] ~]# netstat -utnalp | grep :4010
tcp6 0 0 :::4010 ::: LISTEN 9559/maxscale
[[email protected] ~]#
[[email protected] ~]# netstat -utnalp | grep :4006
tcp6 0 0 :::4006 :::
LISTEN 9559/maxscale
[[email protected] ~]# netstat -utnalp | grep maxscle
[[email protected] ~]# netstat -utnalp | grep maxscale
tcp 0 0 192.168.4.53:52855 192.168.4.55:3306 ESTABLISHED 9559/maxscale
tcp 0 0 192.168.4.53:52228 192.168.4.54:3306 ESTABLISHED 9559/maxscale
tcp6 0 0 :::4010 ::: LISTEN 9559/maxscale
tcp6 0 0 :::4006 :::
LISTEN 9559/maxscale
[[email protected] ~]#
53访问本机的管理服务 查看监控主机的状态
[[email protected] ~]# maxadmin -P4010 -uadmin -pmariadb
MaxScale>list servers

停止maxscale 服务
#ps -C maxscale
#kill -9 pid号

d. 在客户端测试配置
#ping -c 2 192.168.4.53

d.1 在数据库服务器添加访问数据的用户
mysql> grant all on . to [email protected]‘%‘ identified by "123456";

d.2 访问代理主机
#mysql -P4006 -h192.168.4.53 -ustudent -p123456

+++++++++++++++++++++++++++++++++++++
三、MySQL优化(优化思路、 优化什么 、怎么优化)
访问数据时,出结果特别慢。分析可能是由哪些原因导致的。

1 硬件配置低:查看应用设备的使用率CPU 内存 存储(硬盘)
top 0.0 wa
sar
uptime I/O

                    free  -m

2 网络带宽: 使用网络测速软件 网速

3 提供数据库服务软件版本低:
查看数据库服务运行时的运行参数配置(常用配置参数)

超时时间
connect_timeout
建立连接时,三次握手的超时时间
wait_timeout 建立连接后,等待断开连接的超时时间

mysql> show variables like "connect_timeout";
mysql> show variables like "wait_timeout";

允许重复使用的线程的数量
mysql> show variables like "thread_cache_size";

为所有线程缓存打开表的数量。
table_open_cache=2000
mysql> show variables like "table_open_cache";
pc1 T1

pc2 t3 mysqld

pc3 T1

key_buffer-size
sort_buffer_size
read_buffer_sizeread_rnd_buffer_sizename Index
select name from user where name="zhangsan";
select name,uid from user order by uid desc; <----mysqld
select * from user; <------ mysqld
select shell from user group by shell;<------ mysqld

查询缓存相关参数设置?
MySQL> show variables like "query_cache%";

查询缓存写锁有效 存储引擎(MYISAM)
query_cache_wlock_invalidate | OFF

       t1

pc1 select name from user where name="lucy";
name="lucy" ------> 查询缓存

pc2 select name from user where name="lucy";--> 查询缓存
name="lucy"

pc3 update user set name="lili" where name="lucy";

query_cache_type 0|1|2
0 关闭 不存储
1 开启 无条件存储
2 开启 指定存储才存储

query_cache_limit 1048576 超过1M此数不存
query_cache_min_res_unit 4096 最小存储单元4k

查询查询缓存统计信息?
MySQL> show global status like "qcache%";
Qcache_hits 0
Qcache_inserts 0
Qcache_lowmem_prunes 0

并发连接数:
mysql> show variables like "max_connections";

曾经有过的最大连接数
mysql> show global status like "Max_used_connections";

公式:
曾经有过的最大连接数/并发连接数=0.85 * 100% = 85%
3000/ X = 0.85

查看参数的值
MySQL> show variables like "%关键字%";
mysql> show variables like "%password%";
mysql> show variables like "old_passwords";

临时定义 mysql> set [global] 变量名=值;

永久定义
vim /etc/my.cnf
[mysqld]
变量名=值
....
:wq
#systemctl restart mysqld

mysql体系结构?
连接池
sql接口
分析器
优化器
查询缓存
存储引擎
文件系统
管理工具

MySQL服务处理查询请求的过程?

4 程序编写的查询数据库的sql查询命令不合理 ,导致数据库处理慢
在数据库服务器上启用"慢查询日志":记录超过指定时间显示查询结果的sql命令.(忍受值3秒)

5 数据存储架构设置有数据传输瓶颈。

以上是关于6MySQL 主从同步 MySQL 读写分离 MySQL 性能调优的主要内容,如果未能解决你的问题,请参考以下文章

Mysql主从同步 读写分离

mysql1.6(主从同步,数据读写分离,mysql优化)

MySQL主从同步+读写分离

mysql数据库读写分离,主从同步实现方法

MySQL主从复制与读写分离

Mysql高级面试题-读写分离主从复制主从同步延时处理