MySQL读写分离基本原理是让master数据库处理写操作,slave数据库处理读操作。master将写操作的变更同步到各个slave节点。
MySQL读写分离能提高系统性能的原因在于:
- 物理服务器增加,机器处理能力提升。拿硬件换性能。
- 主从只负责各自的读和写,极大程度缓解X锁和S锁争用。
- slave可以配置myiasm引擎,提升查询性能以及节约系统开销。
- master直接写是并发的,slave通过主库发送来的binlog恢复数据是异步。
- slave可以单独设置一些参数来提升其读的性能。
- 增加冗余,提高可用性。
MySQLProxy介绍
下面使用MySQL官方提供的数据库代理层产品MySQLProxy搭建读写分离。
MySQLProxy实际上是在客户端请求与MySQLServer之间建立了一个连接池。所有客户端请求都是发向MySQLProxy,然后经由MySQLProxy进行相应的分析,判断出是读操作还是写操作,分发至对应的MySQLServer上。对于多节点Slave集群,也可以起做到负载均衡的效果。
MySQL读写分离配置
MySQL环境准备
master 192.168.1.5
slave 192.168.1.6
proxy 192.168.1.2
MySQL:5.5.37
MySQL-proxy:mysql-proxy-0.8.4-linux-rhel5-x86-64bit.tar.gz
创建用户并分配权限
1
2
|
mysql
>
create user
libai
identified by
'libai';
mysql
>
grant
all
on
*.*
to
libai@
'192.168.1.%'
identified by
'lib;
|
在配置了MySQL复制,以上操作在master执行会同步到slave节点。
启用MySQL复制
MySQL复制配置请参考这里
先关闭并清除之前的复制。
1
2
|
mysql
>
stop slave;
mysql
>
reset slave
all;
|
启用新的复制同步。启用之前需要清除日志
1
|
mysql
>
change
master
to
master_host=
'192.168.1.5',
master_user=
'libai',
master_password=
'libai',
master_port
=3306,
master_log_file=
'mysql-bin.000001',
master_log_pos
=0;
|
主库
1
2
3
4
5
|
# mysql -h localhost -ulibai -plibai
mysql
>
create
database
d;
mysql
>
use
d;
mysql
>
create
table
t(i
int);
mysql
>
insert
into
t
values(1);
|
从库
1
2
3
4
5
|
mysql
>
select
*
from
t;
+------+
|
i
|
+------+
|
1
|
|
启用MySQLProxy代理服务器
代理服务器上创建mysql用户
1
2
|
# groupadd mysql
# useradd -g mysql mysql
|
解压启动mysql-proxy
1
|
# ./mysql-proxy --daemon --log-level=debug --user=mysql --keepalive --log-file=/var/log/mysql-proxy.log --plugins="proxy" --proxy-backend-addresses="192.168.1.5:3306" --proxy-read-only-backend-addresses="192.168.1.6:3306" --proxy-lua-script="/root/soft/mysql-proxy/rw-splitting.lua" --plugins=admin --admin-username="admin" --admin-password="admin" --admin-lua-script="/root/soft/mysql-proxy/lib/mysql-proxy/lua/admin.lua"
|
其中proxy-backend-addresses是master服务器,proxy-read-only-backend-addresses是slave服务器。可以通过./mysql-proxy –help 查看详细说明。
查看启动后进程
1
2
3
|
# ps -ef | grep mysql
root
25721
1
0
11:33
?
00:00:00
/root
/soft
/mysql
-proxy
/libexec
/mysql
-proxy
--daemon
--
log
-level
=debug
--
user
=mysql
--keepalive
--
log
-
file=/var
/
log
/mysql
-proxy.
log
--
plugins
=proxy
--proxy
-backend
-addresses
=192.168.1.5:3306
--proxy
-
read
-only
-backend
-addresses
=192.168.1.6:3306
--proxy
-lua
-script=/root
/soft
/mysql
-proxy
/rw
-splitting.lua
--
plugins
=admin
--admin
-username
=admin
--admin
-
password
=admin
--admin
-lua
-script=/root
/soft
/mysql
-proxy
/lib
/mysql
-proxy
/lua
/admin.lua
mysql
25722
25721
0
11:33
?
00:00:00
/root
/soft
/mysql
-proxy
/libexec
/mysql
-proxy
--daemon
--
log
-level
=debug
--
user
=mysql
--keepalive
--
log
-
file=/var
/
log
/mysql
-proxy.
log
--
plugins
=proxy
--proxy
-backend
-addresses
=192.168.1.5:3306
--proxy
-
read
-only
-backend
-addresses
=192.168.1.6:3306
--proxy
-lua
-script=/root
/soft
/mysql
-proxy
/rw
-splitting.lua
--
plugins
=admin
--admin
-username
=admin
--admin
-
password
=admin
--admin
-lua
-script=/root
/soft
/mysql
-proxy
/lib
/mysql
-proxy
/lua
/admin.lua
|
4040是proxy端口,4041是admin管理端口
1
2
3
4
5
|
COMMAND
PID
USER
FD
TYPE
DEVICE
SIZE
/OFF
NODE
NAME
mysql
-pro
25722
mysql
10u
IPv4
762429
0t0
TCP
*:yo
-main
(LISTEN)
# lsof -i:4041
COMMAND
PID
USER
FD
TYPE
DEVICE
SIZE
/OFF
NODE
NAME
mysql
-pro
25722
mysql
11u
IPv4
762432
0t0
TCP
*:houston
(LISTEN)
|
测试
保证mysqlproxy节点上可执行mysql 。通过复制同步帐号连接proxy
1
2
3
4
5
6
7
8
9
10
11
|
# mysql -h 192.168.1.2 -ulibai -p --port=4040
mysql
>
show
databases
+--------------------+
|
Database
|
+--------------------+
|
information_schema
|
|
d
|
|
mysql
|
|
performance_schema
|
|
test
|
+--------------------+
|
登录admin查看状态
1
2
3
4
5
6
7
8
|
# mysql -h 192.168.1.2 -u admin -p --port=4041
mysql
>
select
*
from
backends;
+-------------+------------------+-------+------+------+-------------------+
|
backend_ndx
|
address
|
state
|
type
|
uuid
|
connected_clients
|
+-------------+------------------+-------+------+------+-------------------+
|
1
|
192.168.1.5:3306
|
up
|
rw
|
NULL
|
0
|
|
2
|
192.168.1.6:3306
|
up
|
ro
|
NULL
|
0
|
+-------------+------------------+-------+------+------+-------------------+
|
2 rows in set (0.00 sec)
可以从以上查询中看到master和slave状态均为up。
1)登录proxy节点,创建数据库dufu,并创建一张表t
1
2
3
4
5
|
mysql
>
create
database
dufu;
mysql
>
show
databases;
mysql
>
use
dufu;
mysql
>
create
table
t(id
int(10),name
varchar(20));
mysql
>
show
tables;
|
创建完数据库及表后,主从节点上应该都可以看到
2)关闭同步,分别在master和slave上插入数据
1
|
mysql
>
slave
stop;
|
master
1
|
mysql
>
insert
into
t
values(1,
'this_is_master');
|
slave
1
|
mysql
>
insert
into
t
values(2,
'this_is_slave');
|
3)proxy上查看结果
1
2
3
4
5
6
7
8
|
mysql
>
use
dufu;
mysql
>
select
*
from
t;
+------+---------------+
|
id
|
name
|
+------+---------------+
|
2
|
this_is_slave
|
+------+---------------+
1
row
in
set
(0.00
sec)
|
从结果可以看到数据是从slave上读取的,并没考虑master节点上的数据。
直接从proxy上插入数据
1
|
mysql
>
insert
into
t
values(3,
'this_is_proxy');
|
再次查询
1
2
3
4
5
6
|
mysql
>
select
*
from
t;
+------+---------------+
|
id
|
name
|
+------+---------------+
|
2
|
this_is_slave
|
+------+---------------+
|
结果显示查询数据没有变化,因为proxy上执行insert相当于写入到了master上,而查询的数据是从slave上读取的。
master上查询
1
2
3
4
5
6
7
|
mysql
>
select
*
from
t;
+------+----------------+
|
id
|
name
|
+------+----------------+
|
1
|
this_is_master|
|
3
|
this_is_proxy
|
+------+----------------+
|
启用复制,proxy查询
1
2
3
4
5
6
7
8
|
mysql
>
select
*
from
t;
+------+----------------+
|
id
|
name
|
+------+----------------+
|
2
|
this_is_slave
|
|
1
|
this_is_master
|
|
3
|
this_is_proxy
|
+------+----------------+
|
说明此时master上的数据同步到了slave,并且在proxy查询到数据是slave数据库的数据。此时,可以看到MySQLProxy实现了分离。