Mycat（一）入门概述

文章目录

  • 概述
    • 作用
    • 原理
  • Mycat1.x 与 Mycat2 功能对比
    • 1.x 与 2.0 功能对比图
  • Mycat2 相关概念
    • 概念描述
  • 配置文件
    • 1、服务（server）
    • 2、用户（user）
    • 3、数据源（datasource）
    • 4、集群（cluster）
    • 5、逻辑库表（schema）

概述

Mycat 是数据库中间件

在这里插入图片描述

作用

  1. 读写分离
  2. 垂直拆分（分库）、水平拆分（分表）、垂直+水平拆分（分库分表）
    在这里插入图片描述
  3. 多数据源整合
    在这里插入图片描述

原理

Mycat 的原理中最重要的一个动词是“拦截”，它拦截了用户发送过来的 SQL 语
句，首先对 SQL 语句做了一些特定的分析：如分片分析、路由分析、读写分离分析、缓存分析等，然后将此 SQL 发往后端的真实数据库，并将返回的结果做适当的处理，最终再返回给用户。
在这里插入图片描述
这种方式把数据库的分布式从代码中解耦出来，程序员察觉不出来后台使用
Mycat 还是 MySQL

Mycat1.x 与 Mycat2 功能对比

1.x 与 2.0 功能对比图

功能1.62
多语句不支持支持
blob 值支持一部分支持
全局二级索引不支持支持
任意跨库 join(包含复杂查询)catlet 支持支持
关联子查询不支持支持一部分
分库同时分表不支持支持
存储过程支持固定形式的支持更多
支持逻辑视图不支持支持
支持物理视图支持支持
批量插入不支持支持
执行计划管理不支持支持
路由注释支持支持
集群功能支持支持更多集群类型
自动 hash 分片算法不支持支持
支持第三方监控支持 mycat-web支持普罗米斯,kafka日志等监控
流式合拼结果集支持支持
范围查询支持支持
单表映射物理表不支持支持
XA 事务弱 XA支持,事务自动恢复
支持 MySQL8需要更改 mysql8 的服务器配置支持支持
虚拟表不支持支持
joinClustering不支持支持
union all 语法不支持支持
BKAJoin不支持支持
优化器注释不支持支持
ER 表支持支持
全局序列号支持支持
保存点不支持支持

（1）多语句：解析器会对 SQL 进行拆分依次执行（默认配置）
（2）blob 值：BLOB (binary large object)二进制大对象，是一个可以存储二进制文
件的容器。
（3）全局二级索引：使用全局二级索引后,能有效减少全表扫描,对于减少连接使用,
减少计算节点与存储节点的数据传输有帮助.
（4）关联子查询：支持不能消除关联的关联子查询
（5）分库同时分表：把分库分表合一，统一规划
（6）存储过程：存储过程支持多结果集返回、支持接收 affectRow
（7）支持批量插入：支持 rewriteInsertBatchedStatementBatch 参数,用于提高批量
插入性能（只有把 rewriteBatchedStatements 参数置为 true, MySQL 驱动才会帮你批
量执行 SQL）
（8）支持执行计划管理：Mycat2 的执行计划管理主要作用是管理执行计划,加快 SQL
到执行计划的转换,并且提供一个方式可以从持久层读取自定义的执行计划。
（9）自动 hash 分片算法：由 1.6 版本的手动配置算法，到 2.0 的自动 hash 分片
（10）单表映射物理表：使用自动化建表语句创建测试的物理库物理表,它会自动生成
配置文件,然后通过查看本地的配置文件,观察它的属性

Mycat2 相关概念

概念描述

1、分库分表
按照一定规则把数据库中的表拆分为多个带有数据库实例,物理库,物理表访问路
径的分表。
解读：分库：一个电商项目，分为用户库、订单库等等。
分表：一张订单表数据数百万，达到 MySQL 单表瓶颈，分到多个数据库中
的多张表

2、逻辑库
数据库代理中的数据库,它可以包含多个逻辑表。
解读：Mycat 里定义的库，在逻辑上存在，物理上在 MySQL 里并不存在。有可能是
多个 MySQL 数据库共同组成一个逻辑库。类似多个小孩叠罗汉穿上外套，扮演一个大
人。

3、逻辑表
数据库代理中的表,它可以映射代理连接的数据库中的表(物理表)
解读：Mycat 里定义的表，在逻辑上存在，可以映射真实的 MySQL 数据库的表。可
以一对一，也可以一对多。

4、物理库
数据库代理连接的数据库中的库
解读：MySQL 真实的数据库。

5、物理表
数据库代理连接的数据库中的表
解读：MySQL 真实的数据库中的真实数据表

6、拆分键
即分片键,描述拆分逻辑表的数据规则的字段
解读：比如订单表可以按照归属的用户 id 拆分，用户 id 就是拆分键

7、物理分表
指已经进行数据拆分的,在数据库上面的物理表,是分片表的一个分区
解读：多个物理分表里的数据汇总就是逻辑表的全部数据

8、物理分库
一般指包含多个物理分表的库
解读：参与数据分片的实际数据库

9、分库
一般指通过多个数据库拆分分片表,每个数据库一个物理分表,物理分库名字相同
解读：分库是个动作，需要多个数据库参与。就像多个数据库是多个盘子，分库就是
把一串数据葡萄，分到各个盘子里，而查询数据时，所有盘子的葡萄又通过 Mycat2 组
成了完整的一串葡萄。

10、分片表,水平分片表
按照一定规则把数据拆分成多个分区的表,在分库分表语境下,它属于逻辑表的一种
解读：安按照规则拆分数据，上个例子中的那串葡萄。

11、单表
没有分片,没有数据冗余的表,
解读：没有拆分数据，也没有复制数据到别的库的表。

12、全局表,广播表
每个数据库实例都冗余全量数据的逻辑表.
它通过表数据冗余,使分片表的分区与该表的数据在同一个数据库实例里,达到 join 运
算能够直接在该数据库实例里执行.它的数据一致一般是通过数据库代理分发 SQL 实现.
也有基于集群日志的实现
解读：例如系统中翻译字段的字典表，每个分片表都需要完整的字典数据翻译字段。

13、ER 表
狭义指父子表中的子表,它的分片键指向父表的分片键,而且两表的分片算法相同
广义指具有相同数据分布的一组表
解读：关联别的表的子表，例如：订单详情表就是订单表的 ER 表

14、集群
多个数据节点组成的逻辑节点.在 mycat2 里,它是把对多个数据源地址视为一个数据源
地址(名称),并提供自动故障恢复,转移,即实现高可用,负载均衡的组件。
解读：集群就是高可用、负载均衡的代名词

15、数据源
连接后端数据库的组件,它是数据库代理中连接后端数据库的客户端
解读：Mycat 通过数据源连接 MySQL 数据库

16、原型库(prototype)
原型库是 Mycat2 后面的数据库，比如 mysql 库
解读：原型库就是存储数据的真实数据库，配置数据源时必须指定原型库

配置文件

1、服务（server）

mycat/conf

在这里插入图片描述

2、用户（user）

（1） 所在目录

mycat/conf/users

（2） 命名方式

{用户名}.user.json

（3） 配置内容

vim mycat/conf/users/root.user.json
{
"ip":null,
"password":"123456",
"transactionType":"xa",
"username":"root",
"isolation":3
}
#字段含义
#ip：客户端访问ip，建议为空,填写后会对客户端的ip进行限制
# username：用户名
# password：密码
# isolation：设置初始化的事务隔离级别
READ_UNCOMMITTED:1
READ_COMMITTED:2
REPEATED_READ:3,默认
SERIALIZABLE:4
# transactionType：事务类型
可选值:
proxy 本地事务,在涉及大于 1 个数据库的事务,commit 阶段失败会导致不一致,但是兼容
性最好
xa 事务,需要确认存储节点集群类型是否支持 XA
可以通过语句实现切换
set transaction_policy = 'xa'
set transaction_policy = 'proxy'
可以通过语句查询
SELECT @@transaction_policy

3、数据源（datasource）

配置Mycat连接的数据源信息
（1） 所在目录

mycat/conf/datasources

（2） 命名方式

{数据源名字}.datasource.json

（3） 配置内容

vim mycat/conf/datasources/ prototype. datasources.json
{
"dbType": "mysql",
"idleTimeout": 60000,
"initSqls": [],
"initSqlsGetConnection": true,
"instanceType": "READ_WRITE",
"maxCon": 1000,
"maxConnectTimeout": 3000,
"maxRetryCount": 5,
"minCon": 1,
"name": "prototype",
"password": "123456",
"type": "JDBC",
"url":
"jdbc:mysql://127.0.0.1:3306/mysql?useUnicode=true&serverTimezone=UTC",
"user": "root",
"weight": 0,
"queryTimeout":30,//mills
}
#字段含义
# dbType：数据库类型，mysql
# name：用户名
# password：密码
# type：数据源类型，默认 JDBC
# url：访问数据库地址
# idleTimeout：空闲连接超时时间
# initSqls：初始化sql
# initSqlsGetConnection：对于 jdbc 每次获取连接是否都执行 initSqls
# instanceType：配置实例只读还是读写
可选值:
READ_WRITE,READ,WRITE
#weight ：负载均衡权重
# 连接相关配置
"maxCon": 1000,
"maxConnectTimeout": 3000,
"maxRetryCount": 5,
"minCon": 1,

4、集群（cluster）

配置集群信息
（1） 所在目录
mycat/conf/clusters
（2） 命名方式
{集群名字}.cluster.json
（3） 配置内容

vim mycat/conf/clusters/prototype.cluster.json
{
"clusterType":"MASTER_SLAVE",
"heartbeat":{
"heartbeatTimeout":1000,
"maxRetryCount":3,//2021-6-4前是maxRetry，后更正为
maxRetryCount
"minSwitchTimeInterval":300,
"slaveThreshold":0
},
"masters":[ //配置多个主节点,在主挂的时候会选一个检测存活的数据源作
为主节点
"prototypeDs"
],
"replicas":[//配置多个从节点
"xxxx"
],
"maxCon":200,
"name":"prototype",
"readBalanceType":"BALANCE_ALL",
"switchType":"SWITCH"
可选
//
,
"timer":{ //MySQL集群心跳周期,配置则开启集群心跳,Mycat主动检测主从延迟以
及高可用主从切换
"initialDelay": 30,
"period":5,
"timeUnit":"SECONDS"
},
//readBalanceName:"BALANCE_ALL",
//writeBalanceName:"BALANCE_ALL",
}#字段含义
# clusterType：集群类型
可选值:
SINGLE_NODE:单一节点
MASTER_SLAVE:普通主从
GARELA_CLUSTER:garela cluster/PXC 集群
MHA：MHA 集群
MGR：MGR 集群
# readBalanceType：查询负载均衡策略
可选值:
BALANCE_ALL(默认值)
获取集群中所有数据源
BALANCE_ALL_READ
获取集群中允许读的数据源
BALANCE_READ_WRITE
获取集群中允许读写的数据源,但允许读的数据源优先
BALANCE_NONE
获取集群中允许写数据源,即主节点中选择
# switchType：切换类型
可选值:
NOT_SWITCH:不进行主从切换
SWITCH:进行主从切换

5、逻辑库表（schema）

配置逻辑库表，实现分库分表
（1） 所在目录
mycat/conf/schemas
（2） 命名方式
{库名}.schema.json
（3） 配置内容

vim mycat/conf/schemas/mydb1.schema.json
#库配置
{
"schemaName": "mydb",
"targetName": "prototype"
}
# schemaName：逻辑库名
# targetName：目的数据源或集群
targetName自动从prototype目标加载test库下的物理表或者视图作为单表,prototype
必须是mysql服务器
#单表配置
{
"schemaName": "mysql-test",
"normalTables": {
"role_edges": {
"createTableSQL":null,//可选
"locality": {
"schemaName": "mysql",//物理库,可选
"tableName": "role_edges",//物理表,可选
"targetName": "prototype"//指向集群,或者数据源
}
}
......
#详细配置见分库分表

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/pingmian/3207.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

车企的数智化“内功”，大模型帮修炼

车企的数智化“内功”，大模型帮修炼

文｜白 鸽 编｜王一粟 时隔4年回归的北京车展，遇上了中国智能汽车的热潮。 开年价格战的持续洗礼，不仅让一众中国车企都慌得一批，也让全球巨头特斯拉也面临一季度销量大跌局面。 与此同时，智能汽车还在…
阅读更多...
C++初识内存管理和模版

C++初识内存管理和模版

目录 前言 1.C/C内存分布 2. C的内存管理方式 2.1 new/delete操作内置类型 2. new和delete操作自定义类型 3. operator new和operator delete函数 4. new和delete的实现原理 4.1 内置类型 4.2 自定义类型 5. malloc/free和new/delete的区别 6. 初识模版 6.1 泛型编…
阅读更多...
ERROR: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).

ERROR: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).

今天本来想在A服务器上传文件给B服务器的结果发现明明给root用户设置了密码就是远程登陆不了，后来才发现在容器中很多服务都是没有的，所以刚安装后忘记了修改配置文件，导致远程登陆失败。 报错： 解决方法： 在/etc/ssh…
阅读更多...
申请高德地图，报错INVALID_USER_SCODE处理

申请高德地图，报错INVALID_USER_SCODE处理

配置上key后 报错： 解决：将应用类型修改为出行，问题解决 扩展：应用申请 进入应用管理，创建新应用（这里我选了导航，就报了上边的错误） 新应用中添加 key，服务平台选择…
阅读更多...
static和extern关键字详解

static和extern关键字详解

目录 创作不易，如对您有帮助，还望一键三连，谢谢！！！ 回顾 1.作用域和声明周期 1.1作用域 1.2生命周期 2.static和extern 2.1extern 2.2static 2.2-1static修饰局部变量 2.2-2static修饰全局变量 创…
阅读更多...
解决在服务器中减少删除大文件夹耗时太久的问题

解决在服务器中减少删除大文件夹耗时太久的问题

在数据驱动的现代商业环境中，企业对服务器的高效运作有着极高的依赖性。然而，IT管理员们常常面临一个棘手的问题：删除服务器上的大型文件夹过程缓慢，这不仅降低了工作效率，还可能对用户体验造成负面影响。本文将介绍一…
阅读更多...
2024 年 Rust 开发者路线图

2024 年 Rust 开发者路线图

Rust 近年来因其对性能、安全性和并发性的关注而广受欢迎。作为一名开发人员，掌握 Rust 可以为各种机会打开大门，包括 Web 开发。 在 github 上发现了这个优秀的路线图，由 Anshul Goyal 创建，它提供了一条全面的路径，概…
阅读更多...
MIEC CS172(Prolog)

MIEC CS172(Prolog)

Chapter 1 and 2 Fact Facts: Facts are statements that areassumed to be true. The dot ‘.’ character must come at the end of a fact. Example: We want to tell “John likes Mary” : English interpretation The standard form of fact in Prolog Likes (john, ma…
阅读更多...
怎么用AI绘画进行人物修复？

怎么用AI绘画进行人物修复？

用过AI绘画生成人物图片的朋友们是不是都碰到过这样的问题：诡异的造型、崩坏的五官、离谱的手指头、乱七八糟的背景...指望AI一次性生成百分百完美的图貌似有点难啊。 现在AI绘画有了【脸部修复】【手部修复】功能，就能够轻松解决这些的问题了&#xff0…
阅读更多...
Facebook的时间机器：回溯社交媒体的历史

Facebook的时间机器：回溯社交媒体的历史

1. 社交媒体的起源与早期模式 社交媒体的历史可以追溯到互联网的早期发展阶段。在Web 1.0时代，互联网主要是一个信息发布平台，用户主要是被动地接收信息。但随着Web 2.0的兴起，互联网逐渐转变为一个互动和参与的平台，社交媒体应运…
阅读更多...
2024.4.23 关于 LoadRunner 性能测试工具详解 —— VUG

2024.4.23 关于 LoadRunner 性能测试工具详解 —— VUG

目录 引言 LoadRunner 三大组件之间的关系 LoadRunner 脚本录制 启动并访问 WebTours 脚本录制 编译 运行（回放） LoadRunner 脚本加强 事务插入 插入集合点 插入检查点 参数化 ​编辑 打印日志 引言 问题： 此处为啥选择使用 Lo…
阅读更多...
JdbcTemplate详解

JdbcTemplate详解

1 概述 为了使JDBC更加易于使用，Spring在JDBC API上定义了一个抽象层，以此建立一个JDBC存取框架。 作为Spring JDBC框架的核心，JDBC模板的设计目的是为不同类型的JDBC操作提供模板方法，通过这种方式，可以在尽可能保留…
阅读更多...
Linux安装Docker的多版本PHP和多版本MySQL共存

Linux安装Docker的多版本PHP和多版本MySQL共存

1： 先安装docker 安装完后执行，权限设置 sudo usermod -aG docker $USER或者sudo usermod -aG docker kentrl#添加当前用户到Docker用户组中 sudo newgrp docker#更新用户组数据，必须执行否则无效 sudo systemctl restart docker 先看目录结构： 2：按照目录结构挂载磁盘，…
阅读更多...
【Qt常用控件】—— QWidget 核心属性

【Qt常用控件】—— QWidget 核心属性

目录 （一）控件概述 1.1 关于控件体系的发展 （二）QWidget 核心属性 2.1 核心属性概览 2.2 enabled 2.3 geometry 2.4 windowTitle 2.5 windowIcon 2.6 windowOpacity 2.7 cursor 2.8 font 2.9 toolTip 2.10 focus…
阅读更多...
Esko Ukkonen: On-line Construction of Suffix Trees

Esko Ukkonen: On-line Construction of Suffix Trees

Esko Ukkonen: On-line Construction of Suffix Trees 文章目录 Esko Ukkonen: On-line Construction of Suffix Trees一、后缀树的概念及应用【详见刘方州同学报告】1.1 字典树 Trie1.2 后缀树 Suffix Tree2 后缀树的应用 二、朴素后缀树构造方法及问题三、线性时间内后缀树在…
阅读更多...
怎么办xgp会员一年多少钱xgp会员怎么开轻松教你xgp会员开通教程

怎么办xgp会员一年多少钱xgp会员怎么开轻松教你xgp会员开通教程

怎么办？xgp会员一年多少钱？xgp会员怎么开？轻松教你xgp会员开通教程 XGP平台是由微软公司开发的xbox游戏平台的pc版本，为电脑玩家提供了一个游玩微软游戏的平台，XGP平台因其独特的会员服务而广受玩家们好评&#xff0…
阅读更多...
《深度学习在医学图像分析中的应用（第二版）》

《深度学习在医学图像分析中的应用（第二版）》

书籍：Deep Learning for Medical Image Analysis, 2nd Edition 作者：S. Kevin Zhou，Hayit Greenspan，Dinggang Shen 出版：Academic Press书籍下载-《深度学习在医学图像分析中的应用（第二版）》本…
阅读更多...
采用php vue2 开发的一套医院安全（不良）事件管理系统源码（可自动生成鱼骨图）

采用php vue2 开发的一套医院安全（不良）事件管理系统源码（可自动生成鱼骨图）

采用php vue2 开发的一套医院安全（不良）事件管理系统源码（可自动生成鱼骨图） 医院安全（不良）事件管理系统采用无责的、自愿的填报不良事件方式，有效地减轻医护人员的思想压力，以事件…
阅读更多...
Linux开发板配置静态IP

Linux开发板配置静态IP

1、查看网口信息，易知eth0无IP地址 ifconfig2、首先分配一个IP地址 sudo ifconfig eth0 192.168.5.8 up3、此时配置的IP地址只是临时的，当你reboot重启板子上电后，ip地址会消失，因此需要为板子配置静态ip，避免每次上…
阅读更多...
一次违法网站的渗透经历

一次违法网站的渗透经历

0x01 前言 在一次攻防演练中，我发现了一个有趣的渗透路径。在信息收集阶段，我注意到目标网站和用户资产网站共享相同的IP网段。这意味着它们可能在同一台服务器上托管，或者至少由同一家互联网服务提供商管理。这种情况为我们的渗透测试提供了…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023