• Mycat


    学习视频:https://www.bilibili.com/video/BV1WJ411x7bD?p=11

    第一章 入门概述

    1.1 是什么

    1.1.1 数据库中间件

    数据库中间件:连接java应用程序和数据库

    1.1.2 为什么要用Mycat

    在这里插入图片描述

    1.1.3 数据库中间件对比

    在这里插入图片描述

    • Cobar属于阿里B2B事业群,始于2008年,在阿里服役3年多,
      接管3000+个MySQL数据库的schema,
      集群日处理在线SQL请求50亿次以上。由于Cobar发起人的离职,
      Cobar停止维护。
    • Mycat是开源社区在阿里cobar基础上进行二次开发,解决
      了cobar存在的问题,并且加入了许多新
      的功能在其中。青出于蓝而胜于蓝。
    • OneProxy基于MySQL官方的proxy思想利用c进行开发的,
      OneProxy是一款商业收费的中间件。舍
      弃了一些功能,专注在性能和稳定性上。
    • kingshard由小团队用go语言开发,还需要发展,需要不断完善。
    • Vitess是Youtube生产在使用,架构很复杂。不支持MySQL原生
      协议,使用需要大量改造成本。
    • Atlas是360团队基于mysql proxy改写,功能还需完善,
      高并发下不稳定。
    • MaxScale是mariadb(MySQL原作者维护的一个版本)
      研发的中间件
    • MySQLRoute是MySQL官方Oracle公司发布的中间件

    1.1.4 Mycat的历史

    Mycat前身是阿里的cobar。Cobar是由Alibaba开源的MySQL分布式处理中间件,它可以在分布式的环境下看上去像传统数据库一样提供海量数据服务。

    1.1.5 Mycat的官网

    http://www.mycat.io/

    1.2 干什么

    1.2.1 读写分离

    在这里插入图片描述

    1.2.2 数据分片

    垂直拆分(分库)、水平拆分(分表)、垂直+水平拆分(分库分表)
    在这里插入图片描述

    1.2.3 多数据源整合

    在这里插入图片描述

    1.3 原理

    Mycat 的原理中最重要的一个动词是 “拦截”,它拦截了用户发送过来的 SQL 语句,首先对 SQL语句做了一些特定的分析:如分片分析、路由分析、读写分离分析、缓存分析等,然后将此 SQL 发往后端的真实数据库,并将返回的结果做适当的处理,最终再返回给用户。

    在这里插入图片描述 这种方式把数据库的分布式从代码中解耦出来,程序员察觉不出来后台使用 Mycat 还是MySQL。

    第二章 安装启动

    【知识补充】
    1、linux系统的安装方式

    1. rmp方式
      注意:.rpm安装包,按顺序安装
    2. yum方式
      注意:需要联网
    3. 解压后即可使用
    4. 解压后编译安装

    2.1 安装

    1、 解压后即可使用:解压缩文件拷贝到 linux 下 /usr/local/

    1. 将压缩包放在/opt目录下
      在这里插入图片描述
    2. 查看/opt目录下是否有该压缩包
      在这里插入图片描述
    3. 将压缩包进行解压
      在这里插入图片描述
    4. 解压完成可以看到有mycat文件夹
      在这里插入图片描述
    5. 将文件拷贝到/usr/local/目录下在这里插入图片描述
    6. 查看是否拷贝到该目录下
      在这里插入图片描述
    7. 进入该目录下
      在这里插入图片描述
    8. 查看该文件下有哪些文件
      在这里插入图片描述
    9. 查看配置文件信息在这里插入图片描述
      2、三个配置文件
      ①schema.xml:定义逻辑库,表、分片节点等内容
      ②rule.xml:定义分片规则
      ③server.xml:定义用户以及系统相关变量,如端口等

    2.2 启动

    1、修改配置文件server.xml
    在这里插入图片描述

    修改用户信息,与MySQL区分,如下:
    在这里插入图片描述

    <user name="mycat">
    <property name="password">123456</property>
    <property name="schemas">TESTDB</property>
    </user>
    
    • 1
    • 2
    • 3
    • 4

    2、修改配置文件 schema.xml
    删除标签间的表信息,标签只留一个,标签只留一个,只留一对
    在这里插入图片描述
    set nu显示行号
    在这里插入图片描述

    <?xml version="1.0"?>
    <!DOCTYPE mycat:schema SYSTEM "schema.dtd">
    <mycat:schema xmlns:mycat="http://io.mycat/">
     <schema name="TESTDB" checkSQLschema="false" sqlMaxLimit="100" dataNode="dn1">
     </schema>
     <dataNode name="dn1" dataHost="host1" database="testdb" />
     <dataHost name="host1" maxCon="1000" minCon="10" balance="0"
     writeType="0" dbType="mysql" dbDriver="native" switchType="1" 
    slaveThreshold="100">
     <heartbeat>select user()</heartbeat>
     <!-- can have multi write hosts -->
     <writeHost host="hostM1" url="192.168.140.128:3306" user="root"
     password="123123">
     <!-- can have multi read hosts -->
     <readHost host="hostS1" url="192.168.140.127:3306" user="root" 
    password="123123" />
     </writeHost>
     </dataHost>
    </mycat:schema>
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13
    • 14
    • 15
    • 16
    • 17
    • 18
    • 19

    在这里插入图片描述
    3、验证数据库访问情况
    Mycat 作为数据库中间件要和数据库部署在不同机器上,所以要验证远程访问情况。

    mysql -uroot -p123123 -h 192.168.140.128 -P 3306
    mysql -uroot -p123123 -h 192.168.140.127 -P 3306
    #如远程访问报错,请建对应用户
    grant all privileges on . to root@‘缺少的host’ identified by ‘123123’;

    4、启动程序
    ①控制台启动 :去 mycat/bin 目录下执行 ./mycat console
    ②后台启动 :去 mycat/bin 目录下 ./mycat start
    为了能第一时间看到启动日志,方便定位问题,我们选择①控制台启动。
    【补充】:bin sbin usr/bin usr/sbin usr/local/bin usr/local/sbin 启动是不需要 ./

    2.3 登录

    1、登录后台管理窗口
    此登录方式用于管理维护 Mycat
    mysql -umycat -p123456 -P 9066 -h 192.168.140.128
    #常用命令如下:
    show database
    在这里插入图片描述
    show @@help
    在这里插入图片描述
    2、登录数据窗口
    此登录方式用于通过 Mycat 查询数据,我们选择这种方式访问 Mycat

    mysql -umycat -p123456 -P 8066 -h 192.168.140.128

    第三章 搭建读写分离

    我们通过 Mycat 和 MySQL 的主从复制配合搭建数据库的读写分离,实现 MySQL 的高可用性。
    我们将搭建:一主一从、双主双从两种读写分离模式。

    3.1 搭建一主一从

    一个主机用于处理所有写请求,一台从机负责所有读请求,架构图如下
    在这里插入图片描述
    1、 搭建 MySQL 数据库主从复制
    ① MySQL 主从复制原理
    在这里插入图片描述
    ② 主机配置(host79)

    修改配置文件:vim /etc/my.cnf
    #主服务器唯一ID
    server-id=1
    #启用二进制日志
    log-bin=mysql-bin
    #设置不要复制的数据库(可设置多个)
    binlog-ignore-db=mysql
    binlog-ignore-db=information_schema
    #设置需要复制的数据库
    binlog-do-db=需要复制的主数据库名字
    #设置logbin格式
    binlog_format=STATEMENT
    binlog 日志三种格式

    在这里插入图片描述
    ③ 从机配置(host80)

    修改配置文件:vim /etc/my.cnf
    #从服务器唯一ID
    server-id=2
    #启用中继日志
    relay-log=mysql-relay
    ④ 主机、从机重启 MySQL 服务
    ⑤ 主机从机都关闭防火墙
    ⑥ 在主机上建立帐户并授权 slave

    #在主机MySQL里执行授权命令
    GRANT REPLICATION SLAVE ON . TO ‘slave’@‘%’ IDENTIFIED BY ‘123123’;

    #查询master的状态
    show master status;
    在这里插入图片描述
    #记录下File和Position的值
    #执行完此步骤后不要再操作主服务器MySQL,防止主服务器状态值变化

    ⑦ 在从机上配置需要复制的主机

    #复制主机的命令
    CHANGE MASTER TO MASTER_HOST=‘主机的IP地址’,
    MASTER_USER=‘slave’,
    MASTER_PASSWORD=‘123123’,
    MASTER_LOG_FILE=‘mysql-bin.具体数字’,MASTER_LOG_POS=具体值;
    ![在这里插入图片描述](https://img-blog.csdnimg.cn/2fa234c370ae458aaaf911691f7c3252.png
    #启动从服务器复制功能
    start slave;
    #查看从服务器状态
    show slave status\G;
    注意:如果以前配置过主机,需要重置
    1)、stop slave;
    2)、reset master;

    在这里插入图片描述
    #下面两个参数都是Yes,则说明主从配置成功!
    #Slave_IO_Running: Yes
    #Slave_SQL_Running: Yes

    ⑧ 主机新建库、新建表、insert 记录,从机复制
    在这里插入图片描述
    ⑨ 如何停止从服务复制功能

    stop slave;

    ⑩ 如何重新配置主从

    stop slave;
    reset master;

    2 、修改 Mycat 的配置文件 schema.xml
    之前的配置已分配了读写主机,是否已实现读写分离?

    验证读写分离
    (1)在写主机插入:insert into mytbl values (1,@@hostname);
    主从主机数据不一致了
    (2)在Mycat里查询:select * from mytbl;

    修改的balance属性,通过此属性配置读写分离的类型

    负载均衡类型,目前的取值有4 种:
    (1)balance=“0”, 不开启读写分离机制,所有读操作都发送到当前可用的 writeHost 上。
    (2)balance=“1”,全部的 readHost 与 stand by writeHost 参与 select 语句的负载均衡,简单的说,当双主双从
    模式(M1->S1,M2->S2,并且 M1 与 M2 互为主备),正常情况下,M2,S1,S2 都参与 select 语句的负载均衡。
    (3)balance=“2”,所有读操作都随机的在 writeHost、readhost 上分发。
    (4)balance=“3”,所有读请求随机的分发到 readhost 执行,writerHost 不负担读压力

    为了能看到读写分离的效果,把balance设置成2,会在两个主机间切换查询

    在这里插入图片描述
    3、 启动 Mycat
    4、 验证读写分离

    #(1)在写主机数据库表mytbl中插入带系统变量数据,造成主从数据不一致
    INSERT INTO mytbl VALUES(2,@@hostname)
    在这里插入图片描述

    #(2)在Mycat里查询mytbl表,可以看到查询语句在主从两个主机间切换
    在这里插入图片描述

  • 相关阅读:
    SpringBoot 10 登录功能和登录拦截器
    文件字符流说明
    查找和排序算法
    high perfermance computer usage
    荧光标记肽(Arg)9, FAM-labeled
    详细介绍NLP关键词提取算法
    驱动开发:内核枚举DpcTimer定时器
    探索神经网络架构教程视频,设计神经网络的步骤
    RabbitMQ 入门系列:5、基础编码:交换机的进阶介绍及编码方式。
    fluent使用DPM模型计算出的颗粒沉积(trap)数据(.dpm格式)后处理python实现
  • 原文地址:https://blog.csdn.net/wts563540/article/details/124831164