查看原文
其他

Mysql+Mycat实现数据库主从同步与读写分离

2018-03-27

作者 民工哥

此文章源于
浅谈MySQL集群高可用架构
对文章中的架构扩展介绍,之前写过一篇关于MHA的文章
MySQL集群高可用架构之MHA

Mycat介绍

官网: http://mycat.io/ 
电子书: http://mycat.io/document/Mycat_V1.6.0.pdf 
书: http://blog.csdn.net/wind520/article/details/53213691

MyCAT采用Java开发,实现MySQL公开的二进制协议,将自己伪装成MySQL Server;应用只需连接MyCAT 执行SQL,MyCAT按照配置的策略,分发SQL至相应的MySQL节点。

什么是MYCAT

  • 一个彻底开源的,面向企业应用开发的大数据库集群

  • 支持事务、ACID、可以替代MySQL的加强版数据库

  • 一个可以视为MySQL集群的企业级数据库,用来替代昂贵的Oracle集群

  • 一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQL Server

  • 结合传统数据库和新型分布式数据仓库的新一代企业级数据库产品

  • 一个新颖的数据库中间件产品


Mycat整体架构图

Mycat特点介绍

  • 支持SQL92标准

  • 支持MySQL、Oracle、DB2、SQL Server、PostgreSQL等DB的常见SQL语法

  • 遵守Mysql原生协议,跨语言,跨平台,跨数据库的通用中间件代理。

  • 基于心跳的自动故障切换,读写分离,MySQL主从,以及galera cluster集群。

  • 支持Galera for MySQL集群,Percona Cluster或者MariaDB cluster

  • 基于Nio实现,有效管理线程,解决高并发问题。

  • 支持数据的多片自动路由与聚合,sum,count,max等常用的聚合函数,跨库分页。

  • 支持全局序列号,解决分布式下的主键生成问题。

  • 分片规则丰富,插件化开发,易于扩展。

  • 强大的web,命令行监控。

  • 支持前端作为MySQL通用代理,后端JDBC方式支持Oracle、DB2、SQL Server 、 mongodb 、巨杉。

  • 集群基于ZooKeeper管理,在线升级,扩容,智能优化,大数据处理(2.0开发版)。


MySQL主从同步

这个配置这里就不再赘述了,可参考前面的文章

Linux系统MySQL数据库主从同步实战过程


安装Mycat服务

生产环境最好单独使用服务器进行安装,测试环境安装在主库上

需要安装JAVA环境

[root@mysql-m ~]# java -version

java version "1.8.0_144"

Java(TM) SE Runtime Environment (build 1.8.0_144-b01)

Java HotSpot(TM) 64-Bit Server VM (build 25.144-b01, mixed mode)

安装Mycat服务

[root@mysql-m local]# wget http://dl.mycat.io/1.6-RELEASE/Mycat-server-1.6-RELEASE-20161028204710-linux.tar.gz

[root@mysql-m local]# tar zxf Mycat-server-1.6-RELEASE-20161028204710-linux.tar.gz

[root@mysql-m local]# cd mycat/

[root@mysql-m mycat]# ll

total 24

drwxr-xr-x 2 root root 4096 Sep 23 19:13 bin

drwxrwxrwx 2 root root 4096 Mar  1  2016 catlet

drwxrwxrwx 4 root root 4096 Sep 23 19:13 conf

drwxr-xr-x 2 root root 4096 Sep 23 19:13 lib

drwxrwxrwx 2 root root 4096 Oct 28  2016 logs

-rwxrwxrwx 1 root root  217 Oct 28  2016 version.txt

[root@mysql-m mycat]# cat >>/etc/profile<<EOF

> export MYCAT_HOME=/usr/local/mycat

> export PATH=$PATH:$MYCAT_HOME/bin

> EOF

[root@mysql-m mycat]# source /etc/profile


配置Mycat服务


#以下四项取消注释,修改如下

<!--默认是65535 64K 用于sql解析时最大文本长度 -->

<property name="maxStringLiteralLength">65535</property>

<property name="sequnceHandlerType">0</property>

<property name="backSocketNoDelay">1</property>

<property name="frontSocketNoDelay">1</property>

<property name="processorExecutor">1</property>

配置schema.xml文件

主从服务器上配置读写的用户user并给以相应的权限


启动服务

登陆管理管理端口,查看是否有默认的逻辑数据库

查看数据读写入口

从上面可以看出数据写入与读取的入口在哪个库上


测试Mycat读写分离功能

接下来测试通过mycat来进行对主从数据库的读写操作

上面的数据是从逻辑数据库插入与查询的,接下来分别从主从库查看数据是否写入成功

再次查看数据源的入口情况


Mycat性能监控

MYCAT监控

  • 支持对Mycat、Mysql性能监控

  • 支持对Mycat的JVM内存提供监控服务

  • 支持对线程的监控

  • 支持对操作系统的CPU、内存、磁盘、网络的监控


下载WEB管理端软件

wget https://github.com/MyCATApache/Mycat-download/blob/master/mycat-web-1.0/Mycat-web-1.0-SNAPSHOT-20160617163048-linux.tar.gz


需要安装zookeeper

[root@mysql-m local]# wget http://mirrors.hust.edu.cn/apache/zookeeper/zookeeper-3.4.6/zookeeper-3.4.6.tar.gz

[root@mysql-m local]# tar zxf zookeeper-3.4.6.tar.gz

[root@mysql-m local]# ln -s zookeeper-3.4.6 zookeeper

[root@mysql-m conf]# cp zoo_sample.cfg zoo.cfg

[root@mysql-m bin]# ./zkServer.sh start

JMX enabled by default

Using config: /usr/local/zookeeper/bin/../conf/zoo.cfg

Starting zookeeper ... STARTED

[root@mysql-m ~]# lsof -i :2181

COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME

java 3639 root 25u IPv6 19337 0t0 

TCP *:eforward (LISTEN)


安装WEB管理端

[root@mysql-m bin]# cd /usr/local/

[root@mysql-m local]# tar zxf Mycat-web-1.0-SNAPSHOT-20160617163048-linux.tar.gz

[root@mysql-m local]# cd mycat-web/mycat-web/WEB-INF/classes/

[root@mysql-m classes]# ll

total 28

drwxr-xr-x 3 root root 4096 Jun 17  2016 com

-rw-r--r-- 1 root root  367 Jun 17  2016 jdbc.properties

-rw-r--r-- 1 root root 4068 Jun 17  2016 log4j2.xml

drwxr-xr-x 3 root root 4096 Jun 17  2016 mybatis

-rw-r--r-- 1 root root  411 Jun 17  2016 mycat.properties

drwxr-xr-x 3 root root 4096 Jun 17  2016 org

drwxr-xr-x 2 root root 4096 Sep 26 00:21 spring

[root@mysql-m classes]# vim mycat.properties

#

#Mon Jan 16 15:37:36 CST 2012

show.period=3000000

zookeeper=10.0.0.11:2181 

[root@mysql-m mycat-web]# /usr/local/mycat-web/start.sh &

[1] 3684

[root@mysql-m mycat-web]# nohup: ignoring input and appending output to `nohup.out'

[root@mysql-m mycat-web]# lsof -i :8082

COMMAND  PID USER  FD  TYPE DEVICE SIZE/OFF NODE NAME

java 3685 root 122u IPv6 20997 0t0 TCP *:us-cli (LISTEN)

推荐阅读

精心整理|公众号文章目录大全

Docker容器技术入门(一)

Docker容器技术入门(二)

进程管理工具Supervisor(送书活动)

精心整理|清空网盘、抓紧上车

“金三银四”的折腾之聊一聊面试

或许这些你会感兴趣??

民工哥 “有问必答” 专栏开通,欢迎来撩


·end·

—如果喜欢,快分享给你的朋友们吧—

我们一起愉快的玩耍吧

超过10000+万人正在关注

专注于Linux系统运维、运维架构、各类高可用架构技术,热衷于分享开源技术,热爱开源、拥抱开源,我是80后民工哥,微信公众号:民工哥Linux运维,我为自己带盐,谁说80后不能活出精彩人生!!!

关注公众号后台回复 “入群” 索取入群方式

长按关注公众号
热爱开源、拥抱开源

    您可能也对以下帖子感兴趣

    文章有问题?点此查看未经处理的缓存