Atlas (读写分离 + 健康检查 + 从的负载均衡) Mycat 组件(读写分离+分表+健康检查+负载均衡)
为前端应用撑起一片天
基于mysql proxy 的 二次开发
[root@atlas1 ~]#yum install openssl openssl-devel
[root@atlas1 ~]#yum install atlas-3.10.1-12.el7.x86_64.rpm ##核心库
[root@atlas1 ~]#yum install Atlas-sharding_1.0.1-el6.x86_64.rpm ## 配置文件,管理工具等。
主目录 : /usr/local/mysql-proxy/
必须使用 自带的加密工具 生成明文密码的加密字符,用于后续的连接
[root@atlas1 ~]# /usr/local/mysql-proxy/bin/encrypt 123123 #你自己的主服务器密码
taxVyV8vyp0=
[root@atlas1 ~]# vim /usr/local/mysql-proxy/conf/test.cnf ##默认实例名称 test
[mysql-proxy]
#带#号的为非必需的配置项目
#管理接口的用户名
admin-username = admin
#管理接口的密码
admin-password = 123456
#Atlas后端连接的MySQL主库的IP和端口,可设置多项,用逗号分隔
proxy-backend-addresses = 192.168.10.80:3306
#Atlas后端连接的MySQL从库的IP和端口,@后面的数字代表权重,用来作负载均衡,若省略则默认为1,可设置多项,用逗号分隔
proxy-read-only-backend-addresses = 192.168.10.81:3306@1,192.168.10.82:3306@1
#用户名与其对应的加密过的MySQL密码,密码使用PREFIX/bin目录下的加密程序encrypt加密,下行的user1和user2为示例,将其替换为你的MySQL的用户名和加密密码!
pwds = uplooking:++gAN07C/Q0=
## root 存在与所有mysql主机 权限: all 192.168.10.%
#设置Atlas的运行方式,设为true时为守护进程方式,设为false时为前台方式,一般开发调试时设为false,线上运行时设为true,true后面不能有空格。
daemon = true
#设置Atlas的运行方式,设为true时Atlas会启动两个进程,一个为monitor,一个为worker,monitor在worker意外退出后会自动将其重启,
设为false时只有worker,没有monitor,一般开发调试时设为false,线上运行时设为true,true后面不能有空格。
keepalive = true
#工作线程数,对Atlas的性能有很大影响,可根据情况适当设置
event-threads = 8
#日志级别,分为message、warning、critical、error、debug五个级别
log-level = message
#日志存放的路径
log-path = /usr/local/mysql-proxy/log
#SQL日志的开关,可设置为OFF、ON、REALTIME,OFF代表不记录SQL日志,ON代表记录SQL日志,REALTIME代表记录SQL日志且实时写入磁盘,默认为OFF
sql-log = REALTIME ##验证分离效果时可以打开。
#慢日志输出设置。当设置了该参数时,则日志只输出执行时间超过sql-log-slow(单位:ms)的日志记录。不设置该参数则输出全部日志。
sql-log-slow = 2000
#实例名称,用于同一台机器上多个Atlas实例间的区分
#instance = test
#Atlas监听的工作接口IP和端口
proxy-address = 0.0.0.0:3306
#Atlas监听的管理接口IP和端口
admin-address = 0.0.0.0:2345
#分表设置,此例中person为库名,mt为表名,id为分表字段,3为子表数量,可设置多项,以逗号分隔,若不分表则不需要设置该项
#tables = person.mt.id.3
#默认字符集,设置该项后客户端不再需要执行SET NAMES语句
charset = utf8
#允许连接Atlas的客户端的IP,可以是精确IP,也可以是IP段,以逗号分隔,若不设置该项则允许所有IP连接,否则只允许列表中的IP连接
#client-ips = 127.0.0.1, 192.168.1
#Atlas前面挂接的LVS的物理网卡的IP(注意不是虚IP),若有LVS且设置了client-ips则此项必须设置,否则可以不设置
#lvs-ips = 192.168.1.1
####################################
[root@atlas2 ~]# /usr/local/mysql-proxy/bin/mysql-proxyd test start
#指定一个$1 它将用来给后续产生的日志文件已经pid等文件作为命名依据, 关闭,重启示例,都要加这个 $1
#对应配置文件名称 /usr/local/mysql-proxy/conf/test.cnf
OK: MySQL-Proxy of test is started
[root@atlas1 ~]# netstat -ntpl |grep mysql-proxy
tcp 0 0 0.0.0.0:2345 0.0.0.0:* LISTEN 1907/mysql-proxy
tcp 0 0 0.0.0.0:3306 0.0.0.0:* LISTEN 1907/mysql-proxy
#############
[root@atlas1 ~]# tailf /usr/local/mysql-proxy/log/test.log
2015-09-17 07:40:14: (message) chassis-unix-daemon.c:138: [angel] we try to keep PID=1907 alive
2015-09-17 07:40:14: (message) mysql-proxy 0.8.2 started - instance: test
2015-09-17 07:40:14: (message) proxy listening on port 0.0.0.0:3306
2015-09-17 07:40:14: (message) added read/write backend: 192.168.10.3:3306
2015-09-17 07:40:14: (message) added read-only backend: 192.168.10.15:3306
2015-09-17 07:40:14: (message) added read-only backend: 192.168.10.9:3306
2015-09-17 07:40:14: (message) chassis-event-thread.c:235: starting 8 threads
[root@tianyun ~]# mysql -h 192.168.10.17 -uadmin -p123123 -P 2345
select * from help; 显示在管理端口能够执行的指令。
######### 客户端测试,验证读写分离,负载均衡 #####################
## 只能支持 DML 语句的读写分离 , 执行 DDL 需要实际登录 Mysql 执行。
临时 打开atlas 的查询日志, 设置 sql-log = REALTIME
重启atlas ,产生查询日志如下位置:
/usr/local/mysql-proxy/log/sql_test.log
找一个 client : 192.168.10.4 ,在 192.168.10.4 上,向 Atlas 发送 SQL 语句。
mysql -uroot -p123123 -h192.168.10.17 -e "select * from class.students;"
##执行操作 ,执行多次,观察读负载均衡的效果 。
### 执行插入操作。只会向 192.168.10.20 (主)插入
[root@server-130 /usr/local/mysql-proxy/log]# cat sql_test.log
[12/10/2018 11:00:14] C:192.168.10.4:47018 S:192.168.10.20:3306 OK 9.234 “insert into class.kc (cla_name) values (“运维第19部分”)”
[12/10/2018 11:04:29] C:192.168.10.4:47018 S:192.168.10.19:3306 OK 67.016 “select stu_name from class.students where stu_id=2277”
[12/10/2018 11:05:09] C:192.168.10.4:47018 S:192.168.10.18:3306 OK 26.782 “select stu_name from class.students where stu_id=2377”
[12/10/2018 11:05:22] C:192.168.10.4:47018 S:192.168.10.19:3306 OK 0.915 “select stu_name from class.students where stu_id=2577”
####### 验证可用性 ################################
==== 1、关闭一台从
只向一台 从 查询:
[09/27/2018 15:54:12] C:192.168.10.10:46606 S:192.168.10.9:3306 OK 1.389 “select id from class.students”
[09/27/2018 15:54:12] C:192.168.10.10:46606 S:192.168.10.9:3306 OK 1.125 “select id from class.students”
[09/27/2018 15:54:13] C:192.168.10.10:46606 S:192.168.10.9:3306 OK 0.801 “select id from class.students”
[09/27/2018 15:54:13] C:192.168.10.10:46606 S:192.168.10.9:3306 OK 0.736 “select id from class.students”
[09/27/2018 15:54:14] C:192.168.10.10:46606 S:192.168.10.9:3306 OK 2.198 “select id from class.students”
[09/27/2018 15:54:14] C:192.168.10.10:46606 S:192.168.10.9:3306 OK 1.157 “select id from class.students”
=== 2、关闭两台从 ,此时,读写都向 主服务器发送 。
[09/27/2018 15:56:57] C:192.168.10.10:46606 S:192.168.10.3:3306 OK 1.246 “select id from class.students”
[09/27/2018 15:56:57] C:192.168.10.10:46606 S:192.168.10.3:3306 OK 1.271 “select id from class.students”
[09/27/2018 15:57:03] C:192.168.10.10:46606 S:192.168.10.3:3306 OK 0.585 “select * from class.students”
[09/27/2018 15:57:08] C:192.168.10.10:46606 S:192.168.10.3:3306 OK 2.410 “insert into class.students (name) values (“鲁肃”)”
=== 3、两台从开, 关闭 主 (写业务 停止,读正常)
如何保证 ,主 的 高可用。 底层 MHA + Keepalived 配合。