1. Toy模板网首页
  2. > Toy博客

MySQL-中间件mycat（一）

10月前 作者：大虾好吃吗 分类：Toy博客 阅读(72) 违法举报

这篇具有很好参考价值的文章主要介绍了MySQL-中间件mycat（一）。希望对大家有所帮助。如果存在错误或未考虑完全的地方，请大家不吝赐教，您也可以点击"举报违法"按钮提交疑问。

MySQL-中间件mycat（一）

目录

🍁mycat基础概念

🍁Mycat安装部署

🍃初始环境

🍃测试环境

🍃下载安装

🍃修改配置文件

🍃启动mycat

🍃测试连接

    🦐博客主页：大虾好吃吗的博客

    🦐MySQL专栏：MySQL专栏地址

        mycat目前已经出mycat2版本了，虽然还没有全面普及，但是大概这两年各大企业逐步升级mycat2，但是mycat1还是要有一定的了解。本次mycat分三章讲解，熟悉mycat1后，可以去官网下载一个mycat2学习。官网地址：上海云业网络科技有限公司

mycat基础概念

一、什么是MyCat

  1. 一个彻底开源的，面向企业应用开发的大数据库集群

  2. 支持事务、ACID，通过远程可以直接当做数据库使用

  3. 一个可以视为MySQL集群的企业级数据库，用来替代昂贵的Oracle集群

  4. 一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQL Server

  5. 结合传统数据库和新型分布式数据仓库的新一代企业级数据库产品

  6. 一个新颖的数据库中间件产品

二、为什么使用MyCat

        如今随着互联网的发展，数据的量级也是撑指数的增长，从GB到TB到PB。对数据的各种操作也是愈加的困难，传统的关系性数据库已经无法满足快速查询与插入数据的需求。这个时候NoSQL的出现暂时解决了这一危机。它通过降低数据的安全性，减少对事务的支持，减少对复杂查询的支持，来获取性能上的提升。但是，在有些场合NoSQL一些折衷是无法满足使用场景的，就比如有些使用场景是绝对要有事务与安全指标的。这个时候NoSQL肯定是无法满足的，所以还是需要使用关系性数据库。如何使用关系型数据库解决海量存储的问题呢？此时就需要做数据库集群，为了提高查询性能将一个数据库的数据分散到不同的数据库中存储，为应对此问题就出现了——MyCat

综上所述：Mycat作用为：能满足数据库数据大量存储；提高了查询性能。

  1. 读写分离

  2. 数据分片 垂直拆分（分库） 、 水平拆分（分表） 、 垂直+水平拆分（分库分表）

  3. 多数据源整合

三、数据库中间件对比

  1. Cobar属于阿里B2B事业群，始于2008年，在阿里服役3年多，接管3000+个MySQL数据库的schema, 集群日处理在线SQL请求50亿次以上。由于Cobar发起人的离职， Cobar停止维护。

  2. Mycat是开源社区在阿里cobar基础上进行二次开发，解决了cobar存在的问题，并且加入了许多新 的功能在其中。青出于蓝而胜于蓝。

  3. OneProxy基于MySQL官方的proxy思想利用c进行开发的， OneProxy是一款商业收费的中间件。舍 弃了一些功能，专注在性能和稳定性上。

  4. kingshard由小团队用go语言开发，还需要发展，需要不断完善。

  5. Vitess是Youtube生产在使用， 架构很复杂。不支持MySQL原生协议，使用需要大量改造成本。

  6. Atlas是360团队基于mysql proxy改写，功能还需完善，高并发下不稳定。

  7. MaxScale是mariadb（MySQL原作者维护的一个版本） 研发的中间件

  8. MySQLRoute是MySQL官方Oracle公司发布的中间件

四、支持的数据库

支持MySQL、ORACLE、SQLServer等一些主流的数据库。

五、核心技术（分库分表）

数据库分片指：通过某种特定的条件，将我们存放在一个数据库中的数据分散存放在不同的多个数据库（主机）中，这样来达到分散单台设备的负载，根据切片规则，可分为以下两种切片模式MyCAT通过定义表的分片规则来实现分片，每个表格可以捆绑一个分片规则，每个分片规则指定一个分片字段并绑定一个函数，来实现动态分片算法。

  1. Schema：逻辑库，与MySQL中的Database（数据库）对应，一个逻辑库中定义了所包括的Table。

  2. Table：逻辑表，即物理数据库中存储的某一张表，与传统数据库不同，这里的表格需要声明其所存储的逻辑数据节点DataNode。在此可以指定表的分片规则。

  3. DataNode：MyCAT的逻辑数据节点，是存放table的具体物理节点，也称之为分片节点，通过DataSource来关联到后端某个具体数据库上

  4. DataSource：定义某个物理库的访问地址，用于捆绑到Datanode上

六、分片规则

        前面讲了数据切分，一个大表被分成若干个分片表，就需要一定的规则，这样按照某种业务规则把数据分到某个分片的规则就是分片规则，数据切分选择合适的分片规则非常重要，将极大的避免后续数据处理的难。

Mycat安装部署

拓扑图如下：

MySQL-中间件mycat（一）

初始环境

master和slave搭建主从复制，这里就搭建一个简单地主从关系就可以。

1. master开启二进制日志、server_id

[root@master ~]# vim /etc/my.cnf
server_id=1
log_bin=mysql-bin
[root@master ~]# systemctl restart mysqld
[root@master ~]# mysql -uroot -p123             #登录mysql创建主从连接用户
#省略登录信息
mysql> grant replication slave on *.* to rep@'192.168.8.%' identified by '123';
Query OK, 0 rows affected, 1 warning (0.00 sec)
​
mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000005 |      446 |              |                  |                   |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)

2. slave指定server_id、指定maste为8.20

[root@slave ~]# vim /etc/my.cnf 
server_id=2
[root@slave ~]# systemctl restart mysqld
[root@slave ~]# mysql -uroot -p123              #登录mysql指定主为8.20
#省略登录信息
mysql> change master to
    -> master_user='rep',
    -> master_host='192.168.8.20',
    -> master_port=3306,
    -> master_password='123',
    -> master_log_file='mysql-bin.000005',
    -> master_log_pos=446;
Query OK, 0 rows affected, 2 warnings (0.02 sec)
​
mysql> start slave;
Query OK, 0 rows affected (0.01 sec)
​
mysql> show slave status\G
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 192.168.8.20
                  Master_User: rep
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: mysql-bin.000005
          Read_Master_Log_Pos: 446
               Relay_Log_File: slave-relay-bin.000002
                Relay_Log_Pos: 320
        Relay_Master_Log_File: mysql-bin.000005
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
#省略部分内容

测试环境

1. master创建库、表、插入数据

mysql> create database mytest character set utf8;
Query OK, 1 row affected (0.01 sec)
​
mysql> use mytest
Database changed
mysql> create table tb1(
    -> id int primary key,
    -> name varchar(20));
Query OK, 0 rows affected (0.01 sec)
​
mysql> insert into tb1 values(1,'z3');
Query OK, 1 row affected (0.08 sec)
​
mysql> grant all on *.* to root@'%' identified by '123';                #提前创建一个root的远程用户，权限可以根据需求提供，如果没有创建，mycat则没有权限查看数据
Query OK, 0 rows affected, 1 warning (0.01 sec)

2. slave查看数据

mysql> select * from mytest.tb1;
+----+------+
| id | name |
+----+------+
|  1 | z3   |
+----+------+
1 row in set (0.00 sec)

下载安装

1. 下载及安装

jdk：要求jdk必须是1.7及以上版本

Mysql：推荐mysql是5.5以上版本

Mycat：Mycat的官方网站：上海云业网络科技有限公司

下载地址： GitHub - MyCATApache/Mycat-download Mycat有windows、linux多种版本。

第一步：下载Mycat-server-xxxx-linux.tar.gz

第二步：将压缩包解压缩。建议将mycat放到/usr/local/mycat目录下。

第三步：进入mycat目录，启动mycat./mycat start 停止：./mycat stop

mycat支持的命令{ console | start | stop | restart | status |dump } Mycat的默认端口号为：8066

2. 配置文件的相关配置

①schema.xml： 定义逻辑库，表、分片节点等内容

②rule.xml： 定义分片规则

③server.xml： 定义用户以及系统相关变量，如端口等

准备好jdk、mycat软件包，解压到相应目录。

[root@mycat src]# tar zxf jdk-8u131-linux-x64.tar.gz 
[root@mycat src]# mv jdk1.8.0_131/ /usr/local/java
[root@mycat src]# tar zxf Mycat-server-1.6.7.6-release-20220524173810-linux.tar.gz 
[root@mycat src]# mv mycat/ /usr/local/mycat
[root@mycat src]# vim /etc/profile                      #添加path路径
export JAVA_HOME=/usr/local/java
export MYCAT_HOME=/usr/local/mycat
export PATH=$JAVA_HOME/bin:$PATH:$MYCAT_HOME/bin
[root@mycat src]# source /etc/profile
[root@mycat src]# java -version                         #查看jdk版本
java version "1.8.0_131"
Java(TM) SE Runtime Environment (build 1.8.0_131-b11)
Java HotSpot(TM) 64-Bit Server VM (build 25.131-b11, mixed mode)
[root@mycat src]# cd /usr/local/mycat/conf/

修改配置文件

1. 修改server.xml 修改用户信息，与MySQL区分， 如下：

[root@mycat conf]# vim server.xml

MySQL-中间件mycat（一）

2 . 修改schema.xml，这里只需要修改IP（如下图所示），其他的注释信息也被我删掉了，方便查看。

[root@mycat conf]# vim schema.xml
<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">
​
        <schema name="TESTDB" checkSQLschema="true" sqlMaxLimit="100" dataNode="dn1">
        </schema>
        <dataNode name="dn1" dataHost="localhost1" database="mytest" />
        <dataHost name="localhost1" maxCon="1000" minCon="10" balance="0"
                          writeType="0" dbType="mysql" dbDriver="jdbc" switchType="1"  slaveThreshold="100">
                <heartbeat>select user()</heartbeat>
                <!-- can have multi write hosts -->
                <writeHost host="hostM1" url="jdbc:mysql://192.168.8.20:3306" user="root"
                                   password="123">
                <readHost host="hostS1" url="jdbc:mysql://192.168.8.30:3306" user="root"
                                   password="123"></readHost>
                </writeHost>
                
        </dataHost>
</mycat:schema>

MySQL-中间件mycat（一）

启动mycat

[root@mycat conf]# mycat console
或者
[root@mycat conf]# mycat start

测试连接

slave测试等mycat，用户名为mycat，密码默认为123456，端口8066.

[root@slave ~]# mysql -umycat -p123456 -h 192.168.8.10 -P8066
#省略登录信息
mysql> show databases;
+----------+
| DATABASE |
+----------+
| TESTDB   |
+----------+
1 row in set (0.00 sec)

mysql> use TESTDB
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed
mysql> show tables;
+------------------+
| Tables_in_mytest |
+------------------+
| tb1              |
+------------------+
1 row in set (0.01 sec)

mysql> select * from tb1;
+------+------+
| id   | name |
+------+------+
|    1 | z3   |
+------+------+
1 row in set (0.49 sec)

至此mycat部署完成，后面还将针对文件的详细信息，详细讲解。文章来源地址https://www.toymoban.com/news/detail-423949.html

到了这里，关于MySQL-中间件mycat（一）的文章就介绍完了。如果您还想了解更多内容，请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章，希望大家以后多多支持TOY模板网！

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处： 如若内容造成侵权/违法违规/事实不符，请点击违法举报进行投诉反馈，一经查实，立即删除！

分享到：
领支付宝红包 赞助服务器费用

相关文章

  • 【Kubernetes部署Shardingsphere、Mycat、Mysql、Redis、中间件Rocketmq、Rabbitmq、Nacos】

    部署Shardingsphere、Mycat、Mysql、Redis、中间件Rocketmq、Rabbitmq、Nacos的步骤如下： 安装Docker和Kubernetes环境。 部署MySQL： a. 在Kubernetes中创建一个MySQL的Service，可以使用外部LoadBalancer或ClusterIP类型的Service。 b. 创建MySQL的Deployment对象，并设置相关的配置，如镜像名称、环境变量等。

    2024年02月09日
    浏览(56)
  • 搭建开源数据库中间件MyCat2-配置mysql数据库双主双从

    搭建开源数据库中间件MyCat2-配置mysql数据库双主双从

    mycat2官网：MyCat2 前言：mycat2下载地址无法访问，不知道是不是被DNS污染了，还是需要搭梯子访问，所以我只能找到1.21的版本进行安装。搭建mycat2的前提是搭建数据库主从复制。 架构：双主双从 配置：3台服务器，4台数据库；其中2台服务器为数据库各装主从配置，1台服务器

    2024年01月21日
    浏览(64)
  • mysql代理、中间件技术

    mysql代理、中间件技术

    名词 DB proxy 数据库中间件 功能 读写分离：读写分离导致处理速度迅速，一般情况下是主服务器进行写操作而从服务器进行读操作 负载均衡 支持数据的分片自动路由和聚合 本文主要围绕Mycat实现、且在完成MM-SS集群的条件下 1.配置五台虚拟机的域名解析（在之前完成的集群技

    2024年02月12日
    浏览(40)

  • mysql中间件Atlas

    主机 控制端口 工作端口 配置文件 宿主目录 192.1688.1.96 2345 3386 a3386.cnf /usr/local/mysql-proxy    

    2024年02月10日
    浏览(39)
  • mysql进阶1——proxysql中间件

    mysql进阶1——proxysql中间件

    mysql实现读写分离方式： 程序修改mysql操作，直接和数据库通信，简单快捷的读写分离和随机的方式实现的负载均衡，权限独立分配，需要开发人员协助。 amoeba，直接实现读写分离和负载均衡，不用修改代码，有很灵活的数据解决方案，自己分配账户，和后端数据库权限管理

    2024年02月15日
    浏览(42)
  • mysql触发器监听数据投递中间件

    mysql触发器监听数据投递中间件

    目前市面上有许多的 CDC（Change Data Capture） 框架用于监听数据库的数据变动，例如：canal、Debezium、Maxwell等都是用来解析 binlog 日志实现事件的监听。但是有一个情况就是如果公司对 binlog 日志文件的权限管控的很严格，那么这些用于监听的工具就可能因为权限的问题无法使用

    2024年02月07日
    浏览(45)
  • mysql面试题45：读写分离常见方案、哪些中间件可以实现读写分离

    mysql面试题45：读写分离常见方案、哪些中间件可以实现读写分离

    该文章专注于面试，面试只要回答关键点即可，不需要对框架有非常深入的回答，如果你想应付面试，是足够了，抓住关键点 读写分离是一种常见的数据库架构方案，旨在分担数据库的读写压力，提高系统的性能和可扩展性。以下是两种常见的读写分离方案： 主从复制方案

    2024年02月07日
    浏览(44)

  • docker 安装 mysql、redis、rabbitmq、RocketMQ、Nacos 等中间件

    docker 用宝塔进行管理比较方便，如果想外部访问，一定要用宝塔在安全那里打开对应端口 使用 宝塔 直接安装即可 注意：mysql这样是没办法进行外部链接的还需要一步打开外部链接操作。 需要在进入 mysql 的bash之后进行操作：具体操作 通过简易版方式安装，主打的就是有问

    2024年01月21日
    浏览(58)

  • Canal框架 Redis和MySQL数据一致性的解决方案 阿里中间件Canal

    MySQL与Redis缓存的同步的两种方案 方案2：解析MySQL的binlog 实现，将数据库中的数据同步到Redis。数据库每一步操作都会写入binlog，通过订阅监听binlog实时感知数据变化，根据数据变化情况删除reids并添加重试机制。 引入消息队列：若Redis删除失败，则将Redis key放入消息队列，消

    2023年04月12日
    浏览(51)

  • 基于 Docker 的 Spring Boot 项目部署演示，其中使用了 Redis、MySQL 和 RabbitMQ 中间件

    这是一个基于 Docker 的 Spring Boot 项目部署演示，其中使用了 Redis、MySQL 和 RabbitMQ 中间件。 拉取 MySQL 镜像： 创建 MySQL 容器： 将 密码 、 数据库名 、 用户名 和 密码 替换为您自己的值。 拉取 Redis 镜像： 创建 Redis 容器： 拉取 RabbitMQ 镜像： 创建 RabbitMQ 容器： 构建和运行

    2024年02月06日
    浏览(58)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包，优惠每天领

二维码1

领取红包

二维码2

领红包