MySQL读写分离

Posted 2021-08-19 水木，年華

mysql读写分离

• 一.原理
• 二.为什么要做读写分离
• 三.实现方式
• 四.搭建MySQL读写分离
• 五.测试读写分离

一.原理

读写分离就是只在主服务器上写，只在从服务器上读。基本的原理是让主数据库处理事务性查询，而从数据库处理select查询。数据库复制被用来把主数据库上事务性查询导致的变更同步到集群中的从数据库。

二.为什么要做读写分离

因为数据库的"写”(写10000条数据可能要3分钟）操作是比较耗时的。但是数据库的"读”(读10000条数据可能只要5秒钟）。
所以读写分离，解决的是，数据库的写入，影响了查询的效率

什么时候用读写分离
数据库不一定要读写分离，如果程序使用数据库较多时，而更新少，查询多的情况下会考虑使用。利用数据库主从同步，再通过读写分离可以分担数据库压力，提高性能。

三.实现方式

常见的MysQL读写分离分为以下两种:
基于程序代码内都实现

在代码中根据select、insert进行路由分类，这类方法也是目前生产环境应用最广泛的。
优点是性能较好，因为在程序代码中实现，不需要增加额外的设备为硬件开支;缺点是需要开发人员来实现，运维人员无从下手。
但是并不是所有的应用都适合在程序代码中实现读写分离，像一些大型复杂的Java应用，如果在程序代码中实现读写分离对代码改动就较大。

基于中间代理层实现
代理一般位于客户端和服务器之间，代理服务器接到客户端请求后通过判断后转发到后端数据库，有以下代表性程序。
(1） MySQI-Proxy。MySQI-Proxy为 MySQL 开源项目，通过其自带的lua脚本进行SQL 判断。
(2) Atlas是由奇虎360的Web平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项目。它是在mysql-proxy
0.8 .2版本的基础上，对其进行了优化，增加了一些新的功能特性。360内部使用Atlas运行的mysql业务，每天承载的读写请求数达几十亿条。支持事物以及存储过程。
(3） Amoeba。由陈思儒开发，作者曾就职于阿里巴巴。该程序由Java语言进行开发，阿里巴巴将其用于生产环境。但是它不支持事务和存储过程。I

Amoeba:是一个以Mysql为底层数据存储，并对应提供AySQL协议接口的proxy(代理)，外号变形虫读取请求发送给从服务器是,采用轮询调度算法
amoeba使用的java语言编写，配置文件为xml
amoeba主要负责对外的一个代理IP
访问这个IP时，发送的请求为"写"请求，则会转给主服务器
当发送的请求为"读"时，会通过调度转发给从服务器，使用轮询算法，轮流分配给两台从服务器
amoeba可以视为调度器，如果主服务器挂掉（单点故障），则会有MHA解决这个问题

中间代理服务器的功能：
1.实现读写分离
2.隐藏数据库真实IP

四.搭建MySQL读写分离

搭建MySQL读写分离
一、Amoeba ( 192.168.80.5)
##安装Java环境##
因为Amoeba基于是jdk1.5开发的，所以官方推荐使用jdk1.5或1.6版本,高版本不建议使用。
将jdk-6u14-linux-x64.bin和 amoeba-mysql-binary-2.2.0.tar.gz.0 上传到/opt目录下。

cd / opt/
cp jdk-6u14-linux-x64.bin /usr/ local/
cd /usr/local
chmod +x jdk-6u14-linux-x64.bin 
./jdk-6u14-linux-x64.bin     #输入yes,按回车
mv jdk1.6.0_14/  jdk1.6

添加环境变量：

vim /etc/profile

在尾行添加如下内容

export JAVA_HOME=/usr/local/jdk1.6
export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib
export PATH=$JAVA_HOME/lib:$JAVA_HOME/jre/bin/:$PATH:$HOME/bin
export AMOEBA_HOME=/usr/local/amoeba
export PATH=$PATH:$AMOEBA_HOME/bin

加载

source /etc/profile 

查看版本

java -version 

安装Amoeba软件

mkdir /usr/local/amoeba
cd /opt 
tar zxf amoeba-mysql-binary-2.2.0.tar.gz -C /usr/local/amoeba

/usr/local/amoeba/bin/amoeba

配置Amoeba读写分离，两个slave 读负载均衡

先在Master,Slave1,Slave2的myswl上开放权限给Amoeba访问

grant all on *.* to 'test'@'192.168.80.%' identified by '123.com';
flush privileges;

再回到Amoeba服务器

#修改主配置文件

vim /usr/local/amoeba/conf/amoeba.xml

#以下配置的是第三个账户(客户端找amoeba的用户身份)
#30行修改账户名(这里是数据库访问amoeba服务器时使用的账号)
<property name="user">amoeba</property>
#32行修改账户密码(这里是数据库访问amoeba服务器时使用账号时用的密码)<property name="password">123123</propertv>
#115行修改默认池
<propertyname="defaultPoo1">master</propertv>
#117行取消注释
//取消下面的注释符号-->，改到这里
#118-119修改"读池"和"写池"
118 <propertyname="writePool">master</property>119 <propertyname="readPool">slaves</property>

修改数据配置文件

 #23行将text修改为mysql 
mysql schema:Mysql所有数据库信息（show databases)
<property name="schema" >mysql</property>
#26行，amoeba访问三台mysq1数据库的账户和密码(账户为test)
<property name="user">test</property>
#29行，修改访问数据库的密码
<property name="password">123.com</property>
#45行，修改数据库主服务器名/地址
<dbServer name="master" parent="abstractServer">#48行，修改master服务器ip
<property name="ipAddress">192.168.80.3</property>
#52行修改从服务器名
<dbServer name="server1"parent="abstractServer">
#55行修改从服务器地址
<property name="ipAddress">192.168.80.3</property>
#复制52-57行，粘贴，添加第二台服务器名
<dbServer name="slave2" parent="abstractServer">#修改第二台服务器IP
<property name="ipAddress">192.168.80.4</property>
#66行，修改多个服务器池(multiPoo1)的名称(修改为slaves)<dbServer name="slaves"virtual-"true">
#72行，添加两个从服务器的服务器名(slave1 slave2)<property
I
name="poolNames">slave1,slave2</property>

启动

 /usr/local/amoeba/bin/amoeba  start 

另开一个终端，查看是否开启成功

 netstat -natp | grep java 
 netstat -natp | grep 8066

测试：
下载mariadb 客户端

yum -y install mariadb 

远程登录amoeba服务器

mysql -u amoeba -p123123 -h 192.168.80.5 -P 8066

五.测试读写分离

测试一:
amoeba服务器是否关联后端mysql
客户端进入数据库创建表，在三台mysql服务器中查看是否有此表(amoeba关联)

测试二：测试mysql读写分离
2台从服务器关闭主从同步，测试amoeba写分离

stop slave;

在客户端插入数据

insert into test01 value(1);

此时在master端能查询到写入数据，在slave1和slave2查询不到

测试三：
在slave1和slave2插入数据，客户端可以轮询读到,master读不到，验证读的分离