工作拓扑:

MySQL Proxy 实现 MySQL 读写分离提高并发负载 随笔 第1张

SRE实战 互联网时代守护先锋,助力企业售后服务体系运筹帷幄!一键直达领取阿里云限量特价优惠。

MySQL Proxy有一项强大功能是实现“读写分离”,基本原理是让主数据库处理写方面事务,让从库处理SELECT查询。

Amoeba for MySQL是一款优秀的中间件软件,同样可以实现读写分离,负载均衡等功能,并且稳定性也高于MySQL Proxy,有兴趣的可以测试一下。

环境描述:

  • 操作系统:CentOS6.3_x64
  • 主服务器Master:192.168.0.202
  • 从服务器Slave:192.168.0.203
  • 调度服务器MySQL-Proxy:192.168.0.204

一、mysql主从复制

工作原理图:

MySQL Proxy 实现 MySQL 读写分离提高并发负载 随笔 第2张

主从复制的原理:

分为同步复制和异步复制,实际复制架构中大部分为异步复制。 复制的基本过程如下:

1).Slave上面的IO进程连接上Master,并请求从指定日志文件的指定位置(或者从最开始的日志)之后的日志内容;

2).Master接收到来自Slave的IO进程的请求后,通过负责复制的IO进程根据请求信息读取制定日志指定位置之后的日志信息,返回给Slave 的IO进程。返回信息中除了日志所包含的信息之外,还包括本次返回的信息已经到Master端的bin-log文件的名称以及bin-log的位置;

3).Slave的IO进程接收到信息后,将接收到的日志内容依次添加到Slave端的relay-log文件的最末端,并将读取到的Master端的 bin-log的文件名和位置记录到master-info文件中,以便在下一次读取的时候能够清楚的告诉Master“我需要从某个bin-log的哪个位置开始往后的日志内容,请发给我”;

4).Slave的Sql进程检测到relay-log中新增加了内容后,会马上解析relay-log的内容成为在Master端真实执行时候的那些可执行的内容,并在自身执行。

环境描述

  • 操作系统:CentOS6.3_x64
  • 主服务器master:192.168.0.202
  • 从服务器slave:192.168.0.203

一、mysql主从复制

1、主从安装mysql,版本一致

我们装的是 mysql-5.5.30.tar.gz 这里省略…

2、修改master,slave服务器

          Shell  
1 2 3 4 5 6 7 8 9 10 11 12 13 master服务器配置: vi /usr/local/mysql/etc/my.cnf [mysqld] server-id=202     #设置服务器唯一的id,默认是1,我们设置ip最后一段,slave设置203 log-bin=mysql-bin # 启用二进制日志 binlog-ignore-db mysql,information_schema  #忽略写入binlog的库   slave服务器配置: vi /usr/local/mysql/etc/my.cnf [mysqld] server-id=203 replicate-do-db abc     #只同步abc库 slave-skip-errors all   #忽略因复制出现的所有错误

3、重启主从服务器mysql

          Shell  
1 /etc/init.d/mysqld restart

4、在主服务器上建立帐户并授权slave

            Shell  
1 2 mysqlmysql -root -p123.com mysqlGRANT REPLICATION SLAVE ON *.to ‘sync’@‘192.168.1.2’ identified by ‘1234.com’#replication:复制

5、查看主数据库状态

          Shell  
1 2 3 4 5 6 mysqlshow master status; +------------------+----------+--------------+------------------+ File  Position Binlog_Do_DB Binlog_Ignore_DB | +------------------+----------+--------------+------------------+ mysql-bin.000002 263 |  |   | +------------------+----------+--------------+------------------+

6、配置从数据库

          Shell  
1 2 3 4 5 6 7 mysqlchange master to   -> master_host='192.168.0.202',   -> master_user='sync',   -> master_password='1234.com',   -> master_log_file='mysql-bin.000002',   -> master_log_pos=263; #Log和pos是master上随机获取的。这段也可以写到my.cnf里面。

7、启动slave同步进程并查看状态

          Shell  
1 mysqlstart slave;

MySQL Proxy 实现 MySQL 读写分离提高并发负载 随笔 第3张

其中Slave_IO_Running 与 Slave_SQL_Running 的值都必须为YES,才表明状态正常。

8、验证主从同步

在主mysql创建数据库abc,再从mysql查看已经同步成功!

          Shell  
1 2 3 4 5 6 7 8 9 10 11 mysqlcreate database abc; mysqlshow databases; +--------------------+ Database   | +--------------------+ information_schema | abc    | mysql    | performance_schema | test    | +--------------------+

在slave启动报错:

“Last_IO_Error: Got fatal error 1236 from master when reading data from binary log: ‘Could not find first log file name in binary log index file’”

解决:报错的原因主要是slave设置master的二进制文件名或pos值不对应!

先flush logs;清空日志,在查看下主数据库的状态 show master status;看下日志文件名字和position值;

再在slave中,执行:CHANGE MASTER TO MASTER_LOG_FILE=‘二进制日志名’,MASTER_LOG_POS=值;

最后启动同步进程:start slave;

二、mysql-proxy实现读写分离

1、安装mysql-proxy

实现读写分离是有lua脚本实现的,现在mysql-proxy里面已经集成,无需再安装

下载:http://dev.mysql.com/downloads/mysql-proxy/

          Shell  
1 2 tar zxvf mysql-proxy-0.8.3-linux-glibc2.3-x86-64bit.tar.gz mv mysql-proxy-0.8.3-linux-glibc2.3-x86-64bit /usr/local/mysql-proxy

2、配置mysql-proxy,创建主配置文件

            Shell  
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 cd /usr/local/mysql-proxy mkdir lua #创建脚本存放目录 mkdir logs #创建日志目录 cp share/doc/mysql-proxy/rw-splitting.lua ./lua #复制读写分离配置文件 cp share/doc/mysql-proxy/admin-sql.lua ./lua #复制管理脚本 vi /etc/mysql-proxy.cnf   #创建配置文件 [mysql-proxy] user=root #运行mysql-proxy用户 admin-username=proxy #主从mysql共有的用户 admin-password=123.com #用户的密码 proxy-address=192.168.0.204:4000 #mysql-proxy运行ip和端口,不加端口,默认4040 proxy-read-only-backend-addresses=192.168.0.203 #指定后端从slave读取数据 proxy-backend-addresses=192.168.0.202 #指定后端主master写入数据 proxy-lua-script=/usr/local/mysql-proxy/lua/rw-splitting.lua #指定读写分离配置文件位置 admin-lua-script=/usr/local/mysql-proxy/lua/admin-sql.lua #指定管理脚本 log-file=/usr/local/mysql-proxy/logs/mysql-proxy.log #日志位置 log-level=info #定义log日志级别,由高到低分别有(error|warning|info|message|debug) daemon=true    #以守护进程方式运行 keepalive=true #mysql-proxy崩溃时,尝试重启 保存退出! chmod 660 /etc/mysql-porxy.cnf

3、修改读写分离配置文件

          Shell  
1 2 3 4 5 6 7 8 vi /usr/local/mysql-proxy/lua/rw-splitting.lua if not proxy.global.config.rwsplit then   proxy.global.config.rwsplit {    min_idle_connections 1#默认超过4个连接数时,才开始读写分离,改为1    max_idle_connections 1#默认8,改为1    is_debug false   } end

4、启动mysql-proxy

            Shell  
1 2 3 4 /usr/local/mysql-proxy/bin/mysql-proxy --defaults-file=/etc/mysql-proxy.cnf netstat -tupln grep 4000 #已经启动 tcp 192.168.0.204:4000 0.0.0.0:LISTEN 1264/mysql-proxy 关闭 mysql-proxy使用:killall -mysql-proxy

5、测试读写分离

1>.在主服务器创建proxy用户用于mysql-proxy使用,从服务器也会同步这个操作

            Shell  
1 mysqlgrant all on *.to 'proxy'@'192.168.0.204' identified by '123.com';

2>.使用客户端连接mysql-proxy

          Shell  
1 mysql -proxy -192.168.0.204 -4000 -p123.com

创建数据库和表,这时的数据只写入主mysql,然后再同步从slave,可以先把slave的关了,看能不能写入,这里我就不测试了,下面测试下读的数据!

          Shell  
1 2 3 mysqlcreate table user (number INT(10),name VARCHAR(255)); mysqlinsert into test values(01,'zhangsan'); mysqlinsert into user values(02,'lisi');

3>.登陆主从mysq查看新写入的数据如下,

          Shell  
1 2 3 4 5 6 7 8 9 mysqluse test; Database changed mysqlselect from user; +--------+----------+ number name | +--------+----------+ zhangsan | lisi | +--------+----------+

4>.再登陆到mysql-proxy,查询数据,看出能正常查询

          Shell  
1 2 3 4 5 6 7 8 9 mysql -proxy -192.168.0.204 -4000 -p123.com mysqluse test; mysqlselect from user; +--------+----------+ number name | +--------+----------+ zhangsan | lisi | +--------+----------+

5>.登陆从服务器关闭mysql同步进程,这时再登陆mysql-proxy肯定会查询不出数据

          Shell  
1 slave stop;

6>.登陆mysql-proxy查询数据,下面看来,能看到表,查询不出数据

          Shell  
1 2 3 4 5 6 7 8 9 10 mysqluse test; Database changed mysqlshow tables; +----------------+ Tables_in_test | +----------------+ user | +----------------+ mysqlselect from user; ERROR 1146 (42S02)Table 'test.user' doesn'exist

配置成功!真正实现了读写分离的效果!

来源http://www.cnblogs.com/luckcs/articles/2543607.html

扫码关注我们
微信号:SRE实战
拒绝背锅 运筹帷幄