MySQL Proxy 实现 MySQL 读写分离提高并发负载
Posted 疯狂110
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了MySQL Proxy 实现 MySQL 读写分离提高并发负载相关的知识，希望对你有一定的参考价值。
工作拓扑：
mysql Proxy有一项强大功能是实现“读写分离”，基本原理是让主数据库处理写方面事务，让从库处理SELECT查询。
Amoeba for MySQL是一款优秀的中间件软件，同样可以实现读写分离，负载均衡等功能，并且稳定性也高于MySQL Proxy，有兴趣的可以测试一下。
环境描述：
- 操作系统：CentOS6.3_x64
- 主服务器Master：192.168.0.202
- 从服务器Slave：192.168.0.203
- 调度服务器MySQL-Proxy：192.168.0.204
一、mysql主从复制
工作原理图：
主从复制的原理：
分为同步复制和异步复制，实际复制架构中大部分为异步复制。 复制的基本过程如下：
1).Slave上面的IO进程连接上Master，并请求从指定日志文件的指定位置（或者从最开始的日志）之后的日志内容；
2).Master接收到来自Slave的IO进程的请求后，通过负责复制的IO进程根据请求信息读取制定日志指定位置之后的日志信息，返回给Slave 的IO进程。返回信息中除了日志所包含的信息之外，还包括本次返回的信息已经到Master端的bin-log文件的名称以及bin-log的位置；
3).Slave的IO进程接收到信息后，将接收到的日志内容依次添加到Slave端的relay-log文件的最末端，并将读取到的Master端的 bin-log的文件名和位置记录到master-info文件中，以便在下一次读取的时候能够清楚的告诉Master“我需要从某个bin-log的哪个位置开始往后的日志内容，请发给我”；
4).Slave的Sql进程检测到relay-log中新增加了内容后，会马上解析relay-log的内容成为在Master端真实执行时候的那些可执行的内容，并在自身执行。
环境描述
- 操作系统：CentOS6.3_x64
- 主服务器master：192.168.0.202
- 从服务器slave：192.168.0.203
一、mysql主从复制
1、主从安装mysql，版本一致
我们装的是 mysql-5.5.30.tar.gz 这里省略…
2、修改master，slave服务器
|
1
2
3
4
5
6
7
8
9
10
11
12
13
|
master服务器配置：
vi /usr/local/mysql/etc/my.cnf
[mysqld]
server-id=202 #设置服务器唯一的id，默认是1，我们设置ip最后一段，slave设置203
log-bin=mysql-bin # 启用二进制日志
binlog-ignore-db = mysql,information_schema #忽略写入binlog的库
slave服务器配置：
vi /usr/local/mysql/etc/my.cnf
[mysqld]
server-id=203
replicate-do-db = abc #只同步abc库
slave-skip-errors = all #忽略因复制出现的所有错误
|
3、重启主从服务器mysql
|
1
|
/etc/init.d/mysqld restart
|
4、在主服务器上建立帐户并授权slave
|
1
2
|
mysql> mysql -u root -p123.com
mysql> GRANT REPLICATION SLAVE ON *.* to ‘sync’@‘192.168.1.2’ identified by ‘1234.com’; #replication:复制
|
5、查看主数据库状态
|
1
2
3
4
5
6
|
mysql> show master status;
+------------------+----------+--------------+------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+------------------+----------+--------------+------------------+
| mysql-bin.000002 | 263 | | |
+------------------+----------+--------------+------------------+
|
6、配置从数据库
|
1
2
3
4
5
6
7
|
mysql> change master to
-> master_host=\'192.168.0.202\',
-> master_user=\'sync\',
-> master_password=\'1234.com\',
-> master_log_file=\'mysql-bin.000002\',
-> master_log_pos=263;
#Log和pos是master上随机获取的。这段也可以写到my.cnf里面。
|
7、启动slave同步进程并查看状态
|
1
|
mysql> start slave;
|
其中Slave_IO_Running 与 Slave_SQL_Running 的值都必须为YES，才表明状态正常。
8、验证主从同步
在主mysql创建数据库abc，再从mysql查看已经同步成功！
|
1
2
3
4
5
6
7
8
9
10
11
|
mysql> create database abc;
mysql> show databases;
+--------------------+
| Database |
+--------------------+
| information_schema |
| abc |
| mysql |
| performance_schema |
| test |
+--------------------+
|
在slave启动报错：
“Last_IO_Error: Got fatal error 1236 from master when reading data from binary log: ‘Could not find first log file name in binary log index file’”
解决：报错的原因主要是slave设置master的二进制文件名或pos值不对应！
先flush logs；清空日志，在查看下主数据库的状态 show master status;看下日志文件名字和position值；
再在slave中，执行：CHANGE MASTER TO MASTER_LOG_FILE=‘二进制日志名’,MASTER_LOG_POS=值;
最后启动同步进程：start slave；
二、mysql-proxy实现读写分离
1、安装mysql-proxy
实现读写分离是有lua脚本实现的，现在mysql-proxy里面已经集成，无需再安装
下载：http://dev.mysql.com/downloads/mysql-proxy/
|
1
2
|
tar zxvf mysql-proxy-0.8.3-linux-glibc2.3-x86-64bit.tar.gz
mv mysql-proxy-0.8.3-linux-glibc2.3-x86-64bit /usr/local/mysql-proxy
|
2、配置mysql-proxy，创建主配置文件
|
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
|
cd /usr/local/mysql-proxy
mkdir lua #创建脚本存放目录
mkdir logs #创建日志目录
cp share/doc/mysql-proxy/rw-splitting.lua ./lua #复制读写分离配置文件
cp share/doc/mysql-proxy/admin-sql.lua ./lua #复制管理脚本
vi /etc/mysql-proxy.cnf #创建配置文件
[mysql-proxy]
user=root #运行mysql-proxy用户
admin-username=proxy #主从mysql共有的用户
admin-password=123.com #用户的密码
proxy-address=192.168.0.204:4000 #mysql-proxy运行ip和端口，不加端口，默认4040
proxy-read-only-backend-addresses=192.168.0.203 #指定后端从slave读取数据
proxy-backend-addresses=192.168.0.202 #指定后端主master写入数据
proxy-lua-script=/usr/local/mysql-proxy/lua/rw-splitting.lua #指定读写分离配置文件位置
admin-lua-script=/usr/local/mysql-proxy/lua/admin-sql.lua #指定管理脚本
log-file=/usr/local/mysql-proxy/logs/mysql-proxy.log #日志位置
log-level=info #定义log日志级别，由高到低分别有(error|warning|info|message|debug)
daemon=true #以守护进程方式运行
keepalive=true #mysql-proxy崩溃时，尝试重启
保存退出！
chmod 660 /etc/mysql-porxy.cnf
|
3、修改读写分离配置文件
|
1
2
3
4
5
6
7
8
|
vi /usr/local/mysql-proxy/lua/rw-splitting.lua
if not proxy.global.config.rwsplit then
proxy.global.config.rwsplit = {
min_idle_connections = 1, #默认超过4个连接数时，才开始读写分离，改为1
max_idle_connections = 1, #默认8，改为1
is_debug = false
}
end
|
4、启动mysql-proxy
|
1
2
3
4
|
/usr/local/mysql-proxy/bin/mysql-proxy --defaults-file=/etc/mysql-proxy.cnf
netstat -tupln | grep 4000 #已经启动
tcp 0 0 192.168.0.204:4000 0.0.0.0:* LISTEN 1264/mysql-proxy
关闭mysql-proxy使用：killall -9 mysql-proxy
|
5、测试读写分离
1>.在主服务器创建proxy用户用于mysql-proxy使用，从服务器也会同步这个操作
|
1
|
mysql> grant all on *.* to \'proxy\'@\'192.168.0.204\' identified by \'123.com\';
|
2>.使用客户端连接mysql-proxy
|
1
|
mysql -u proxy -h 192.168.0.204 -P 4000 -p123.com
|
创建数据库和表，这时的数据只写入主mysql，然后再同步从slave，可以先把slave的关了，看能不能写入，这里我就不测试了，下面测试下读的数据！
|
1
2
3
|
mysql> create table user (number INT(10),name VARCHAR(255));
mysql> insert into test values(01,\'zhangsan\');
mysql> insert into user values(02,\'lisi\');
|
3>.登陆主从mysq查看新写入的数据如下，
|
1
2
3
4
5
6
7
8
9
|
mysql> use test;
Database changed
mysql> select * from user;
+--------+----------+
| number | name |
+--------+----------+
| 1 | zhangsan |
mysql-proxy代理加mysql主从实现读写分离
|