分库分表-ShardingSphere 4.x(2)

❤️作者简介:2022新星计划第三季云原生与云计算赛道Top5🏅、华为云享专家🏅、云原生领域潜力新星🏅

💛博客首页:C站个人主页🌞

💗作者目的:如有错误请指正,将来会不断的完善笔记,帮助更多的Java爱好者入门,共同进步!

文章目录

  • 分库分表-ShardingSphere 4.x(2)
    • ShardingSphere概述
    • Sharding-JDBC实战教程(下)
      • Sharding-JDBC广播表
        • Config实体类
        • ConfigMapper接口
        • application.properties
        • junit测试类
          • 测试1:往ds1.t_config这个广播表插入数据
      • Sharding-JDBC读写分离⭐
        • Docker搭建MySQL主从复制(1主1从)⭐
          • Master主节点配置
          • Slave从节点配置
          • 主从同步失败问题(Slave_SQL_Running:No)
            • Slave_SQL_Running:No的解决办法
        • 给Master和Slave的MySQL各自插入一张表⭐
          • 数据库(orderdb1)
          • 数据库表(orderdb1.order)
        • 开始配置Sharding-JDBC主从复制和读写分离⭐
        • application.properties
        • junit测试类
          • 测试1:测试主从同步,读写分离(写操作)⭐
          • 测试2:测试读写分离(读操作)⭐
      • 注意事项(遇到的bug的解决方案⭐)
          • 问题1:Druid数据源问题
    • Sharding-Proxy实战教程
      • Linux下载Sharding-Proxy4.1.1(window版本也是一样的安装方式)⭐
        • 方式1:官网下载(缺点是:需要修改很多地方,而且下载很慢,不推荐!)
        • 方式2:sharding-proxy的改进版(优点:拿来即用,不用修改任何东西,下载快。推荐⭐)
      • Linux安装JDK8(Sharding-Proxy需要JDK环境⭐)
      • Sharding-Proxy基本配置⭐
      • Sharding-Proxy分库分表⭐
        • 数据库(orderdb1和orderdb2)
        • Docker启动一个MySQL,并执行上面的命令
        • 开始配置分库分表
      • Sharding-Proxy读写分离⭐
        • Docker搭建MySQL主从复制(1主1从)⭐
          • Master主节点配置
          • Slave从节点配置
          • 主从同步失败问题(Slave_SQL_Running:No)
            • Slave_SQL_Running:No的解决办法
        • 给Master和Slave的MySQL各自插入一张表⭐
          • 数据库(orderdb1)
          • 数据库表(orderdb1.order)
        • 开始配置Sharding-Proxy读写分离⭐

分库分表-ShardingSphere 4.x(2)

项目所在仓库

ShardingSphere概述

Apache ShardingSphere 是一款开源的分布式数据库生态项目,由 JDBC 和 Proxy 两款产品组成。 其核心采用可插拔架构,通过组件扩展功能。 对上以数据库协议及 SQL 方式提供诸多增强功能,包括数据分片、访问路由、数据安全等;对下原生支持 MySQL、PostgreSQL、SQL Server、Oracle 等多种数据存储引擎。 Apache ShardingSphere 项目理念,是提供数据库增强计算服务平台,进而围绕其上构建生态。 充分利用现有数据库的计算与存储能力,通过插件化方式增强其核心能力,为企业解决在数字化转型中面临的诸多使用难点,为加速数字化应用赋能。

Sharding-JDBC实战教程(下)

Sharding-JDBC广播表

Config实体类
package com.boot.entity;import com.baomidou.mybatisplus.annotation.TableField;
import com.baomidou.mybatisplus.annotation.TableName;
import lombok.AllArgsConstructor;
import lombok.Data;
import lombok.NoArgsConstructor;
import lombok.experimental.Accessors;import java.io.Serializable;/*** TODO: 2022/8/8* @author youzhengjie*///lombok注解简化开发
@Data
@AllArgsConstructor
@NoArgsConstructor
@Accessors(chain = true) //开启链式编程
@TableName("t_config")
public class Config implements Serializable {@TableField("config_id")private Long configId;@TableField("config_info")private String configInfo;
}
ConfigMapper接口
package com.boot.dao;import com.baomidou.mybatisplus.core.mapper.BaseMapper;
import com.boot.entity.Config;
import org.apache.ibatis.annotations.Mapper;
import org.springframework.stereotype.Repository;@Mapper
@Repository
public interface ConfigMapper extends BaseMapper<Config> {}
application.properties
#配置ShardingSphere数据源,定义一个或多个数据源名称
spring.shardingsphere.datasource.names=ds1,ds2#配置ds1的数据源(对应orderdb1数据库)
spring.shardingsphere.datasource.ds1.type=com.alibaba.druid.pool.DruidDataSource
spring.shardingsphere.datasource.ds1.driver-class-name=com.mysql.jdbc.Driver
spring.shardingsphere.datasource.ds1.url=jdbc:mysql://localhost:3306/orderdb1?useSSL=false&autoReconnect=true&characterEncoding=UTF-8&serverTimezone=UTC
spring.shardingsphere.datasource.ds1.username=root
spring.shardingsphere.datasource.ds1.password=18420163207#配置ds2的数据源(对应orderdb2数据库)
spring.shardingsphere.datasource.ds2.type=com.alibaba.druid.pool.DruidDataSource
spring.shardingsphere.datasource.ds2.driver-class-name=com.mysql.jdbc.Driver
spring.shardingsphere.datasource.ds2.url=jdbc:mysql://localhost:3306/orderdb2?useSSL=false&autoReconnect=true&characterEncoding=UTF-8&serverTimezone=UTC
spring.shardingsphere.datasource.ds2.username=root
spring.shardingsphere.datasource.ds2.password=18420163207# 配置广播表主键生成策略
spring.shardingsphere.sharding.tables.t_config.key-generator.column= config_id
spring.shardingsphere.sharding.tables.t_config.key-generator.type=SNOWFLAKE# 配置广播表表名(广播表最核心的就是这个),上面配置了两个数据源(ds1和ds2)
# 广播表就是说当我们插入数据到ds1.t_config或者ds2.t_config中的随便那一个,另外一个数据源的t_config表也会自动插入相同的数据(其他操作都是一样会自动同步)
# 广播表会找到spring.shardingsphere.datasource.names配置的数据源列表对所有t_config进行同步。
spring.shardingsphere.sharding.broadcast-tables=t_config#开启ShardingSphere的SQL输出日志
spring.shardingsphere.props.sql.show=true
# 在映射实体或者属性时,将数据库中表名和字段名中的下划线去掉,按照驼峰命名法映射 order_id ---> orderId
mybatis-plus.configuration.map-underscore-to-camel-case=true# 这个配置一定要加(注意)
spring.main.allow-bean-definition-overriding= true
junit测试类
测试1:往ds1.t_config这个广播表插入数据
	@Autowiredprivate ConfigMapper configMapper;	@Testvoid addConfigToBroadcastTable(){Config config = new Config();config.setConfigInfo("配置信息123");configMapper.insert(config);}
  • 输出日志:

在这里插入图片描述

  • 查看数据库:

在这里插入图片描述

Sharding-JDBC读写分离⭐

Docker搭建MySQL主从复制(1主1从)⭐
Master主节点配置
  • 1:运行一个mysql容器实例。作为Master节点(如果没有mysql镜像则会自动拉取)
docker run -p 3307:3306 \
-v /my-sql/mysql-master/log:/var/log/mysql \
-v /my-sql/mysql-master/data:/var/lib/mysql \
-v /my-sql/mysql-master/conf:/etc/mysql \
-e MYSQL_ROOT_PASSWORD=123456 \
--name mysql-master \
-d mysql:5.7
  • 2:创建my.cnf文件(也就是mysql的配置文件)
vim /my-sql/mysql-master/conf/my.cnf

将内容粘贴进my.cnf文件

[client]
# 指定编码格式为utf8,默认的MySQL会有中文乱码问题
default_character_set=utf8
[mysqld]
collation_server=utf8_general_ci
character_set_server=utf8# 全局唯一id(不允许有相同的)
server_id=200
binlog-ignore-db=mysql
# 指定MySQL二进制日志(可以修改)
log-bin=order-mysql-bin
# binlog最大容量
binlog_cache_size=1M
# 二进制日志格式(这里指定的是混合日志)
binlog_format=mixed
# binlog的有效期(单位:天)
expire_logs_days=7
slave_skip_errors=1062
  • 3:重启该mysql容器实例
docker restart mysql-master
  • 4:进入容器内部,并登陆mysql(密码默认是123456)
$ docker exec -it mysql-master /bin/bash
$ mysql -uroot -p
  • 5:在Master节点的MySQL中创建用户和分配权限

在主数据库创建的该帐号密码只是用来进行同步数据。

create user 'slave'@'%' identified by '123456';grant replication slave, replication client on *.* to 'slave'@'%';
Slave从节点配置
  • 1:运行一个MySQL容器实例,作为slave节点(从节点)
docker run -p 3308:3306 \
-v /my-sql/mysql-slave/log:/var/log/mysql \
-v /my-sql/mysql-slave/data:/var/lib/mysql \
-v /my-sql/mysql-slave/conf:/etc/mysql \
-e MYSQL_ROOT_PASSWORD=123456  \
--name mysql-slave \
-d mysql:5.7
  • 2:创建my.cnf文件(也就是mysql的配置文件)
vim /my-sql/mysql-slave/conf/my.cnf

将内容粘贴进my.cnf文件

[client]
# 指定编码格式为utf8,默认的MySQL会有中文乱码问题
default_character_set=utf8
[mysqld]
collation_server=utf8_general_ci
character_set_server=utf8# 全局唯一id(不允许有相同的)
server_id=201
binlog-ignore-db=mysql
# 指定MySQL二进制日志(可以修改)
log-bin=order-mysql-bin
# binlog最大容量
binlog_cache_size=1M
# 二进制日志格式(这里指定的是混合日志)
binlog_format=mixed
# binlog的有效期(单位:天)
expire_logs_days=7
slave_skip_errors=1062
# 表示slave将复制事件写进自己的二进制日志
log_slave_updates=1
# 表示从机只能读
read_only=1
  • 3:重启该mysql容器实例
docker restart mysql-slave
  • 4:查看容器实例是否都是up
[root@k8s-master ~]# docker ps | grep mysql
3be6e547ab4e   mysql:5.7                                                         "docker-entrypoint.s…"   About a minute ago   Up 24 seconds       33060/tcp, 0.0.0.0:3308->3306/tcp, :::3308->3306/tcp   mysql-slave
214fed096342   mysql:5.7                                                         "docker-entrypoint.s…"   7 minutes ago        Up 4 minutes        33060/tcp, 0.0.0.0:3307->3306/tcp, :::3307->3306/tcp   mysql-master
  • 5:进入从机MySQL
$ docker exec -it mysql-slave /bin/bash
$ mysql -uroot -p
  • 6:查询Master数据库所在的服务器(复制起来):
[Master数据库所在的服务器 ~]# ifconfig
ens33: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500inet 192.168.184.100  netmask 255.255.255.0  broadcast 192.168.184.255inet6 fe80::224c:e6cc:c9ab:f4e0  prefixlen 64  scopeid 0x20<link>ether 00:0c:29:af:f8:9f  txqueuelen 1000  (Ethernet)RX packets 113915  bytes 164657385 (157.0 MiB)RX errors 0  dropped 0  overruns 0  frame 0TX packets 12073  bytes 970949 (948.1 KiB)TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0
  • 7:在从数据库(slave)配置主从同步(记住下面这个命令要在从(slave)数据库执行)

在Master节点中找到ens33的ip地址并放到下面的master_host中(记住这个ip是Master数据库所在的服务器ip,不是从Slave数据库的ip):

change master to master_host='192.168.184.100',master_user='slave',master_password='123456',master_port=3307,master_log_file='order-mysql-bin.000001',master_log_pos=617,master_connect_retry=30;

配置参数解析

master_host:主数据库(Master)的 ip 地址
master_user:在Master数据库中创建的用来进行同步的帐号
master_password:在Master数据库中创建的用来进行同步的帐号的密码
master_port:Master数据库的 MySQL端口号,这里是3307
master_log_file:MySQL的 binlog文件名
master_log_pos:binlog读取位置

  • 8:在从数据库(slave)查看主从同步状态:
mysql> show slave status \G;
*************************** 1. row ***************************Slave_IO_State: Master_Host: 192.168.184.100Master_User: slaveMaster_Port: 3307Connect_Retry: 30Master_Log_File: order-mysql-bin.000001Read_Master_Log_Pos: 617Relay_Log_File: 3be6e547ab4e-relay-bin.000001Relay_Log_Pos: 4Relay_Master_Log_File: order-mysql-bin.000001Slave_IO_Running: NoSlave_SQL_Running: NoReplicate_Do_DB: Replicate_Ignore_DB: Replicate_Do_Table: Replicate_Ignore_Table: Replicate_Wild_Do_Table: Replicate_Wild_Ignore_Table: Last_Errno: 0Last_Error: Skip_Counter: 0Exec_Master_Log_Pos: 617Relay_Log_Space: 154Until_Condition: NoneUntil_Log_File: Until_Log_Pos: 0Master_SSL_Allowed: NoMaster_SSL_CA_File: Master_SSL_CA_Path: Master_SSL_Cert: Master_SSL_Cipher: Master_SSL_Key: Seconds_Behind_Master: NULL
Master_SSL_Verify_Server_Cert: NoLast_IO_Errno: 0Last_IO_Error: Last_SQL_Errno: 0Last_SQL_Error: Replicate_Ignore_Server_Ids: Master_Server_Id: 0Master_UUID: Master_Info_File: /var/lib/mysql/master.infoSQL_Delay: 0SQL_Remaining_Delay: NULLSlave_SQL_Running_State: Master_Retry_Count: 86400Master_Bind: Last_IO_Error_Timestamp: Last_SQL_Error_Timestamp: Master_SSL_Crl: Master_SSL_Crlpath: Retrieved_Gtid_Set: Executed_Gtid_Set: Auto_Position: 0Replicate_Rewrite_DB: Channel_Name: Master_TLS_Version: 
1 row in set (0.15 sec)ERROR: 
No query specified

我们找到里面的Slave_IO_Running: No,Slave_SQL_Running: No属性,发现都是No的状态,证明主从同步还没有开始。。。

  • 9:在从数据库(slave)正式开启主从同步
start slave;
  • 10:再次在从数据库中查看主从同步状态
mysql> show slave status \G;
*************************** 1. row ***************************Slave_IO_State: Waiting for master to send eventMaster_Host: 192.168.184.100Master_User: slaveMaster_Port: 3307Connect_Retry: 30Master_Log_File: order-mysql-bin.000001Read_Master_Log_Pos: 617Relay_Log_File: 3be6e547ab4e-relay-bin.000002Relay_Log_Pos: 326Relay_Master_Log_File: order-mysql-bin.000001Slave_IO_Running: YesSlave_SQL_Running: YesReplicate_Do_DB: Replicate_Ignore_DB: Replicate_Do_Table: Replicate_Ignore_Table: Replicate_Wild_Do_Table: Replicate_Wild_Ignore_Table: Last_Errno: 0Last_Error: Skip_Counter: 0Exec_Master_Log_Pos: 617Relay_Log_Space: 540Until_Condition: NoneUntil_Log_File: Until_Log_Pos: 0Master_SSL_Allowed: NoMaster_SSL_CA_File: Master_SSL_CA_Path: Master_SSL_Cert: Master_SSL_Cipher: Master_SSL_Key: Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: NoLast_IO_Errno: 0Last_IO_Error: Last_SQL_Errno: 0Last_SQL_Error: Replicate_Ignore_Server_Ids: Master_Server_Id: 200Master_UUID: a606bab7-1736-11ed-9207-0242ac110002Master_Info_File: /var/lib/mysql/master.infoSQL_Delay: 0SQL_Remaining_Delay: NULLSlave_SQL_Running_State: Slave has read all relay log; waiting for more updatesMaster_Retry_Count: 86400Master_Bind: Last_IO_Error_Timestamp: Last_SQL_Error_Timestamp: Master_SSL_Crl: Master_SSL_Crlpath: Retrieved_Gtid_Set: Executed_Gtid_Set: Auto_Position: 0Replicate_Rewrite_DB: Channel_Name: Master_TLS_Version: 
1 row in set (0.09 sec)ERROR: 
No query specified

我们可以看到已经都为yes了,说明主从同步已经开启。

也可以用Navicat去连接这两个数据库。如果Navicat出现连接不了docker的mysql,则可以:

方法一:关闭防火墙(测试环境用,生产环境不可以用)

sudo systemctl stop firewalld

方法二:开放防火墙对应端口,比如master数据库的3307和slave数据库的3308(生产环境用这个)

主从同步失败问题(Slave_SQL_Running:No)
mysql> show slave status \G;
*************************** 1. row ***************************Slave_IO_State: Waiting for master to send eventMaster_Host: 192.168.184.132Master_User: slaveMaster_Port: 3307Connect_Retry: 30Master_Log_File: order-mysql-bin.000001Read_Master_Log_Pos: 3752Relay_Log_File: 2c4136668536-relay-bin.000002Relay_Log_Pos: 326Relay_Master_Log_File: order-mysql-bin.000001Slave_IO_Running: YesSlave_SQL_Running: NoReplicate_Do_DB: Replicate_Ignore_DB: Replicate_Do_Table: Replicate_Ignore_Table: Replicate_Wild_Do_Table: Replicate_Wild_Ignore_Table: Last_Errno: 1007Last_Error: Error 'Can't create database 'mall'; database exists' on query. Default database: 'mall'. Query: 'create database mall'
  • Slave_SQL_Running为No的状态,那么这是为什么呢?
  • 可以看到Last_Error: Error ‘Can’t create database ‘mall’; database exists’ on query. Default database: ‘mall’. Query: ‘create database mall’
  • 原因是主数据库(Master)和从数据库(slave)不一致造成的,我在从数据库执行了命令导致数据不一致,最终导致主从复制失败。
Slave_SQL_Running:No的解决办法

1:把主数据库和从数据库变成一模一样,也就是把多余的数据库和表删除掉,变成默认的mysql状态。(切记生产环境下要做好数据备份!!!)

2:结束同步:

stop slave;

3:再次开启同步:

start slave;

4:搞定!

mysql> show slave status \G;
*************************** 1. row ***************************Slave_IO_State: Waiting for master to send eventMaster_Host: 192.168.184.132Master_User: slaveMaster_Port: 3307Connect_Retry: 30Master_Log_File: order-mysql-bin.000001Read_Master_Log_Pos: 3752Relay_Log_File: 2c4136668536-relay-bin.000003Relay_Log_Pos: 326Relay_Master_Log_File: order-mysql-bin.000001Slave_IO_Running: YesSlave_SQL_Running: Yes
给Master和Slave的MySQL各自插入一张表⭐
数据库(orderdb1)
CREATE DATABASE orderdb1;
数据库表(orderdb1.order)
SET NAMES utf8mb4;
SET FOREIGN_KEY_CHECKS = 0;DROP TABLE IF EXISTS `order`;
CREATE TABLE `order`  (`order_id` bigint(20) NOT NULL,`order_info` varchar(255) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL,`user_id` bigint(20) NOT NULL,PRIMARY KEY (`order_id`) USING BTREE
) ENGINE = InnoDB CHARACTER SET = utf8 COLLATE = utf8_general_ci ROW_FORMAT = DYNAMIC;SET FOREIGN_KEY_CHECKS = 1;
  • 查看数据库:

在这里插入图片描述

开始配置Sharding-JDBC主从复制和读写分离⭐
application.properties
#配置ShardingSphere数据源,定义一个或多个数据源名称
spring.shardingsphere.datasource.names=master01,slave01#配置master01的数据源(对应master主数据库)
spring.shardingsphere.datasource.master01.type=com.alibaba.druid.pool.DruidDataSource
spring.shardingsphere.datasource.master01.driver-class-name=com.mysql.jdbc.Driver
spring.shardingsphere.datasource.master01.url=jdbc:mysql://192.168.184.100:3307/orderdb1?useSSL=false&autoReconnect=true&characterEncoding=UTF-8&serverTimezone=UTC
spring.shardingsphere.datasource.master01.username=root
spring.shardingsphere.datasource.master01.password=123456#配置slave01的数据源(对应slave从数据库)
spring.shardingsphere.datasource.slave01.type=com.alibaba.druid.pool.DruidDataSource
spring.shardingsphere.datasource.slave01.driver-class-name=com.mysql.jdbc.Driver
spring.shardingsphere.datasource.slave01.url=jdbc:mysql://192.168.184.100:3308/orderdb1?useSSL=false&autoReconnect=true&characterEncoding=UTF-8&serverTimezone=UTC
spring.shardingsphere.datasource.slave01.username=root
spring.shardingsphere.datasource.slave01.password=123456# 配置order表主键生成策略
spring.shardingsphere.sharding.tables.order.key-generator.column=order_id
spring.shardingsphere.sharding.tables.order.key-generator.type=SNOWFLAKE# 主从复制+读写分离三大配置(核心)# 主从复制数据源定义为:master-slave-datasource01(其实都可以)
# master-data-source-name:为上面定义的master主数据源的名称(只能写一个主库),写操作全部到master01数据源
spring.shardingsphere.sharding.master-slave-rules.master-slave-datasource01.master-data-source-name=master01
# slave-data-source-names:为上面定义的slave从数据源的名称列表(**可以写多个,用逗号分隔**),读操作全部到slave01数据源
spring.shardingsphere.sharding.master-slave-rules.master-slave-datasource01.slave-data-source-names=slave01
# order分表策略,固定分配至 master-slave-datasource01 的 order 真实表
spring.shardingsphere.sharding.tables.order.actual-data-nodes=master-slave-datasource01.order#开启ShardingSphere的SQL输出日志
spring.shardingsphere.props.sql.show=true
# 在映射实体或者属性时,将数据库中表名和字段名中的下划线去掉,按照驼峰命名法映射 order_id ---> orderId
mybatis-plus.configuration.map-underscore-to-camel-case=true# 这个配置一定要加(注意)
spring.main.allow-bean-definition-overriding= true
junit测试类
测试1:测试主从同步,读写分离(写操作)⭐
	@Autowiredprivate OrderMapper orderMapper;//测试主从同步,读写分离(写操作)@Testvoid addOrder(){Order order = new Order();order.setOrderInfo("测试主从复制").setUserId(1001L);orderMapper.insert(order);}
  • 输出日志:(查看写操作是到哪个数据源中执行)

在这里插入图片描述

  • 查看数据库:(查看主从复制是否成功)

在这里插入图片描述

测试2:测试读写分离(读操作)⭐
	// 测试读写分离(读操作)@Testvoid selectOrder(){List<Order> orders = orderMapper.selectList(null);orders.forEach(System.out::println);}
  • 输出日志:(查看读操作是到哪个数据源中执行)

在这里插入图片描述

注意事项(遇到的bug的解决方案⭐)

问题1:Druid数据源问题

不要使用druid-spring-boot-starter这个依赖,否则启动会出现问题(会有冲突)。

解决方案:(使用下面的Druid数据源,可以自己调整版本,其他不动!)

<!--        要使用下面这个druid依赖,不能使用druid-spring-boot-starter的依赖--><dependency><groupId>com.alibaba</groupId><artifactId>druid</artifactId><version>1.2.6</version></dependency>

Sharding-Proxy实战教程

ShardingSphere-Proxy 是 Apache ShardingSphere 的第二个产品。 它定位为透明化的数据库代理端,通过实现数据库二进制协议,对异构语言提供支持。 目前提供 MySQL 和 PostgreSQL 协议,透明化数据库操作,对 DBA 更加友好。

ShardingSphere-Proxy 的优势在于对异构语言的支持,以及为 DBA 提供可操作入口。

Linux下载Sharding-Proxy4.1.1(window版本也是一样的安装方式)⭐

方式1:官网下载(缺点是:需要修改很多地方,而且下载很慢,不推荐!)
  • 1:进入官网下载:

shardingsphere所有版本

在这里插入图片描述
在这里插入图片描述

  • 2:解压Sharding-Proxy包,然后把lib目录下的所有文件后缀名都改成.jar(这里是一个坑,有一些文件后缀名不是.jar,此时我们需要更改过来)

在这里插入图片描述

  • 3:下载mysql的jar包放到Sharding-Proxy的lib目录下,然后打成zip包上传到服务器:

mysql-connector-java-8快速下载地址

在这里插入图片描述
在这里插入图片描述

  • 4:查看sharding-proxy的zip包是否上传成功:
[root@k8s-master sharding-proxy]# pwd
/root/sharding-proxy
[root@k8s-master sharding-proxy]# ls
apache-shardingsphere-4.1.1-sharding-proxy-bin.zip
  • 5:由于这个sharding-proxy是zip包,所以要下载unzip进行解压缩。
yum -y install unzip
  • 6:解压sharding-proxy
unzip apache-shardingsphere-4.1.1-sharding-proxy-bin.zip
  • 7:给文件夹改个名:
mv apache-shardingsphere-4.1.1-sharding-proxy-bin sharding-proxy-4.1.1
方式2:sharding-proxy的改进版(优点:拿来即用,不用修改任何东西,下载快。推荐⭐)

下载地址

  • 1:将zip包上传到服务器:

  • 2:查看sharding-proxy的zip包是否上传成功:

[root@k8s-master sharding-proxy]# pwd
/root/sharding-proxy
[root@k8s-master sharding-proxy]# ls
apache-shardingsphere-4.1.1-sharding-proxy-bin.zip
  • 3:由于这个sharding-proxy是zip包,所以要下载unzip进行解压缩。
yum -y install unzip
  • 4:解压sharding-proxy
unzip apache-shardingsphere-4.1.1-sharding-proxy-bin.zip
  • 5:给文件夹改个名:
mv apache-shardingsphere-4.1.1-sharding-proxy-bin sharding-proxy-4.1.1

Linux安装JDK8(Sharding-Proxy需要JDK环境⭐)

  • 1:去官网下载JDK8的tar.gz包;或者下载我们下面给的地址的zip包。然后上传到Linux服务器(我们拿下面的zip包举例)

快速下载JDK8的Linux包

[root@k8s-master jdk]# pwd
/root/jdk
[root@k8s-master jdk]# ls
jdk1.8-linux.zip
  • 2:解压zip包:
unzip jdk1.8-linux.zip
  • 3:在/usr/local下创建文件夹:
mkdir -p /usr/local/java
  • 4:将刚刚解压到的jdk复制过去:
cp -rf jdk1.8-linux /usr/local/java
  • 5:当前jdk目录:
[root@k8s-master java]# pwd
/usr/local/java
[root@k8s-master java]# ls
jdk1.8-linux
  • 6:配置环境变量:

在最后一行粘贴:(注意:JAVA_HOME=/usr/local/java/jdk1.8-linux 就是你刚刚copy到/usr/local/java下的java目录文件夹)

export JAVA_HOME=/usr/local/java/jdk1.8-linux
export CLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$PATH:$JAVA_HOME/bin
  • 7:让刚刚设置的环境变量生效并检查是否安装成功
source /etc/profile
  • 8:给/usr/local/java/jdk1.8-linux/bin/java目录权限:
chmod +x /usr/local/java/jdk1.8-linux/bin/java
  • 9:查看是否安装成功:
[root@k8s-master java]# java -version
java version "1.8.0_333"
Java(TM) SE Runtime Environment (build 1.8.0_333-b02)
Java HotSpot(TM) 64-Bit Server VM (build 25.333-b02, mixed mode)

Sharding-Proxy基本配置⭐

  • 1:进入sharding-proxy的配置文件所在目录:
cd /root/sharding-proxy/sharding-proxy-4.1.1/conf
  • 2:删除文件 server.yaml
rm -f /root/sharding-proxy/sharding-proxy-4.1.1/conf/server.yaml
  • 3:重新编辑server.yaml
vi /root/sharding-proxy/sharding-proxy-4.1.1/conf/server.yaml

内容如下:

# orchestration配置服务治理(例如nacos、zookeeper等等都可以接入进去)#orchestration:
#  orchestration_ds:
#    orchestrationType: registry_center,config_center # 服务治理的类型(一般就是注册中心和配置中心)
#    instanceType: zookeeper #服务治理的类型(例如nacos、zookeeper等等)
#    serverLists: localhost:2181 #服务治理的url地址(也就是nacos、zookeeper的地址)
#    namespace: orchestration
#    props:
#      overwrite: false
#      retryIntervalMilliseconds: 500
#      timeToLiveSeconds: 60
#      maxRetries: 3
#      operationTimeoutMilliseconds: 500# 配置用户帐号密码权限:
authentication:users:root: # 这个代表帐号为:rootpassword: root # 帐号为root的用户密码为root (并且权限最高)sharding: # 这个代表帐号为:shardingpassword: sharding # 帐号为sharding的用户密码为shardingauthorizedSchemas: sharding_db # 帐号为sharding的用户只能操作sharding_db数据库# 下面的配置不用管,把注释去掉即可。
props:max.connections.size.per.query: 1acceptor.size: 16  # The default value is available processors count * 2.executor.size: 16  # Infinite by default.proxy.frontend.flush.threshold: 128  # The default value is 128.# LOCAL: Proxy will run with LOCAL transaction.# XA: Proxy will run with XA transaction.# BASE: Proxy will run with B.A.S.E transaction.proxy.transaction.type: LOCALproxy.opentracing.enabled: falseproxy.hint.enabled: falsequery.with.cipher.column: truesql.show: falseallow.range.query.with.inline.sharding: false

Sharding-Proxy分库分表⭐

数据库(orderdb1和orderdb2)
CREATE DATABASE orderdb1;
CREATE DATABASE orderdb2;

数据库逻辑表:(orderdb1和orderdb2数据库都要执行下面的语句)

SET NAMES utf8mb4;
SET FOREIGN_KEY_CHECKS = 0;DROP TABLE IF EXISTS `order`;
CREATE TABLE `order`  (`order_id` bigint(20) NOT NULL,`order_info` varchar(255) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL,`user_id` bigint(20) NOT NULL,PRIMARY KEY (`order_id`) USING BTREE
) ENGINE = InnoDB CHARACTER SET = utf8 COLLATE = utf8_general_ci ROW_FORMAT = DYNAMIC;DROP TABLE IF EXISTS `order_1`;
CREATE TABLE `order_1`  (`order_id` bigint(20) NOT NULL,`order_info` varchar(255) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL,`user_id` bigint(20) NOT NULL,PRIMARY KEY (`order_id`) USING BTREE
) ENGINE = InnoDB CHARACTER SET = utf8 COLLATE = utf8_general_ci ROW_FORMAT = DYNAMIC;DROP TABLE IF EXISTS `order_2`;
CREATE TABLE `order_2`  (`order_id` bigint(20) NOT NULL,`order_info` varchar(255) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL,`user_id` bigint(20) NOT NULL,PRIMARY KEY (`order_id`) USING BTREE
) ENGINE = InnoDB CHARACTER SET = utf8 COLLATE = utf8_general_ci ROW_FORMAT = DYNAMIC;DROP TABLE IF EXISTS `t_config`;
CREATE TABLE `t_config`  (`config_id` bigint(20) NOT NULL,`config_info` text CHARACTER SET utf8 COLLATE utf8_general_ci NULL,PRIMARY KEY (`config_id`) USING BTREE
) ENGINE = InnoDB CHARACTER SET = utf8 COLLATE = utf8_general_ci ROW_FORMAT = Dynamic;SET FOREIGN_KEY_CHECKS = 1;
Docker启动一个MySQL,并执行上面的命令
docker run -p 3311:3306 \
-v /my-sql/mysql01/log:/var/log/mysql \
-v /my-sql/mysql01/data:/var/lib/mysql \
-v /my-sql/mysql01/conf:/etc/mysql \
-e MYSQL_ROOT_PASSWORD=123456 \
--name mysql01 \
-d mysql:5.7
  • 效果图:

在这里插入图片描述

开始配置分库分表
  • 1:删除 config-sharding.yaml(或者直接编辑都可以)
rm -f /root/sharding-proxy/sharding-proxy-4.1.1/conf/config-sharding.yaml
  • 2:重新编辑config-sharding.yaml:
vi /root/sharding-proxy/sharding-proxy-4.1.1/conf/config-sharding.yaml

内容如下:

# sharding-proxy分库分表默认的代理数据库,通过这个数据库可以访问我们真实的数据库(不用改它)
schemaName: sharding_db
# 配置数据源
dataSources:ds1: # 定义一个ds1数据源url: jdbc:mysql://192.168.184.100:3311/orderdb1?serverTimezone=UTC&useSSL=false #mysql的urlusername: root # mysql帐号password: 123456 # mysql密码connectionTimeoutMilliseconds: 30000idleTimeoutMilliseconds: 60000maxLifetimeMilliseconds: 1800000maxPoolSize: 50ds2: # 定义一个ds2数据源url: jdbc:mysql://192.168.184.100:3311/orderdb2?serverTimezone=UTC&useSSL=false #mysql的urlusername: root # mysql帐号password: 123456 # mysql密码connectionTimeoutMilliseconds: 30000idleTimeoutMilliseconds: 60000maxLifetimeMilliseconds: 1800000maxPoolSize: 50
#配置分片规则
shardingRule:tables:order: # 逻辑表名(我们的逻辑表是order)actualDataNodes: ds${1..2}.order_${1..2} #数据节点分布(没有真实表的话sharding-proxy会自动生成,所以只需要逻辑表即可)databaseStrategy: #分库策略inline: # 指定inline分库策略shardingColumn: order_id #分片键algorithmExpression: ds${order_id % 2 + 1}  # 分片算法        tableStrategy: # 分表策略inline: # 指定inline分表策略shardingColumn: order_id #分片键algorithmExpression: order_${order_id % 2 + 1} # 分片算法keyGenerator: # 主键生成策略type: SNOWFLAKE #雪花算法column: order_id #主键字段
  • 3:给sharding-proxy启动脚本权限:
[root@k8s-master bin]# cd /root/sharding-proxy/sharding-proxy-4.1.1/bin
[root@k8s-master bin]# chmod u+x *.sh
  • 4:启动 Sharding-Proxy 服务(指定sharding-proxy的端口为3366,不要使用默认端口)
[root@k8s-master bin]# pwd
/root/sharding-proxy/sharding-proxy-4.1.1/bin
[root@k8s-master bin]# ./start.sh 3366
Starting the Sharding-Proxy ...
The port is 3366
The classpath is /root/sharding-proxy/sharding-proxy-4.1.1/conf:.:..:/root/sharding-proxy/sharding-proxy-4.1.1/lib/*:/root/sharding-proxy/sharding-proxy-4.1.1/lib/*:/root/sharding-proxy/sharding-proxy-4.1.1/ext-lib/*
Please check the STDOUT file: /root/sharding-proxy/sharding-proxy-4.1.1/logs/stdout.log
  • 5:查看是否启动成功:
cat /root/sharding-proxy/sharding-proxy-4.1.1/logs/stdout.log

在这里插入图片描述

  • 6:application.properties:(注意:下面的账号、密码、IP、端口、数据库全部要换成sharding-proxy的)
#关闭shardingsphere-JDBC(由于我们不使用shardingsphere-JDBC所以需要先关闭)
spring.shardingsphere.enabled=false# 配置普通的JDBC数据源(去连接sharding-proxy的分库分表代理数据库)
spring.datasource.type=com.alibaba.druid.pool.DruidDataSource
spring.datasource.driver-class-name=com.mysql.jdbc.Driver
# 将url换成sharding-proxy代理数据库的IP和端口(3366),数据库统一换成sharding_db(sharding-proxy的分库分表代理数据库)-----重点
spring.datasource.url=jdbc:mysql://192.168.184.100:3366/sharding_db?useSSL=false&autoReconnect=true&characterEncoding=UTF-8&serverTimezone=UTC
# sharding-proxy的账号
spring.datasource.username=root
# sharding-proxy的密码
spring.datasource.password=root# 在映射实体或者属性时,将数据库中表名和字段名中的下划线去掉,按照驼峰命名法映射 order_id ---> orderId
mybatis-plus.configuration.map-underscore-to-camel-case=true# 这个配置一定要加(注意)
spring.main.allow-bean-definition-overriding= true
  • 7:测试方法:
	@Testvoid addOrder(){for (int i = 0; i < 9; i++) {Order order = new Order();order.setOrderId(Long.valueOf("1000"+i)). setOrderInfo("Sharding-Proxy success").setUserId(1001L);orderMapper.insert(order);}
  • 8:查看数据库:

在这里插入图片描述

Sharding-Proxy读写分离⭐

Docker搭建MySQL主从复制(1主1从)⭐
Master主节点配置
  • 1:运行一个mysql容器实例。作为Master节点(如果没有mysql镜像则会自动拉取)
docker run -p 3307:3306 \
-v /my-sql/mysql-master/log:/var/log/mysql \
-v /my-sql/mysql-master/data:/var/lib/mysql \
-v /my-sql/mysql-master/conf:/etc/mysql \
-e MYSQL_ROOT_PASSWORD=123456 \
--name mysql-master \
-d mysql:5.7
  • 2:创建my.cnf文件(也就是mysql的配置文件)
vim /my-sql/mysql-master/conf/my.cnf

将内容粘贴进my.cnf文件

[client]
# 指定编码格式为utf8,默认的MySQL会有中文乱码问题
default_character_set=utf8
[mysqld]
collation_server=utf8_general_ci
character_set_server=utf8# 全局唯一id(不允许有相同的)
server_id=200
binlog-ignore-db=mysql
# 指定MySQL二进制日志(可以修改)
log-bin=order-mysql-bin
# binlog最大容量
binlog_cache_size=1M
# 二进制日志格式(这里指定的是混合日志)
binlog_format=mixed
# binlog的有效期(单位:天)
expire_logs_days=7
slave_skip_errors=1062
  • 3:重启该mysql容器实例
docker restart mysql-master
  • 4:进入容器内部,并登陆mysql(密码默认是123456)
$ docker exec -it mysql-master /bin/bash
$ mysql -uroot -p
  • 5:在Master节点的MySQL中创建用户和分配权限

在主数据库创建的该帐号密码只是用来进行同步数据。

create user 'slave'@'%' identified by '123456';grant replication slave, replication client on *.* to 'slave'@'%';
Slave从节点配置
  • 1:运行一个MySQL容器实例,作为slave节点(从节点)
docker run -p 3308:3306 \
-v /my-sql/mysql-slave/log:/var/log/mysql \
-v /my-sql/mysql-slave/data:/var/lib/mysql \
-v /my-sql/mysql-slave/conf:/etc/mysql \
-e MYSQL_ROOT_PASSWORD=123456  \
--name mysql-slave \
-d mysql:5.7
  • 2:创建my.cnf文件(也就是mysql的配置文件)
vim /my-sql/mysql-slave/conf/my.cnf

将内容粘贴进my.cnf文件

[client]
# 指定编码格式为utf8,默认的MySQL会有中文乱码问题
default_character_set=utf8
[mysqld]
collation_server=utf8_general_ci
character_set_server=utf8# 全局唯一id(不允许有相同的)
server_id=201
binlog-ignore-db=mysql
# 指定MySQL二进制日志(可以修改)
log-bin=order-mysql-bin
# binlog最大容量
binlog_cache_size=1M
# 二进制日志格式(这里指定的是混合日志)
binlog_format=mixed
# binlog的有效期(单位:天)
expire_logs_days=7
slave_skip_errors=1062
# 表示slave将复制事件写进自己的二进制日志
log_slave_updates=1
# 表示从机只能读
read_only=1
  • 3:重启该mysql容器实例
docker restart mysql-slave
  • 4:查看容器实例是否都是up
[root@k8s-master ~]# docker ps | grep mysql
3be6e547ab4e   mysql:5.7                                                         "docker-entrypoint.s…"   About a minute ago   Up 24 seconds       33060/tcp, 0.0.0.0:3308->3306/tcp, :::3308->3306/tcp   mysql-slave
214fed096342   mysql:5.7                                                         "docker-entrypoint.s…"   7 minutes ago        Up 4 minutes        33060/tcp, 0.0.0.0:3307->3306/tcp, :::3307->3306/tcp   mysql-master
  • 5:进入从机MySQL
$ docker exec -it mysql-slave /bin/bash
$ mysql -uroot -p
  • 6:查询Master数据库所在的服务器(复制起来):
[Master数据库所在的服务器 ~]# ifconfig
ens33: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500inet 192.168.184.100  netmask 255.255.255.0  broadcast 192.168.184.255inet6 fe80::224c:e6cc:c9ab:f4e0  prefixlen 64  scopeid 0x20<link>ether 00:0c:29:af:f8:9f  txqueuelen 1000  (Ethernet)RX packets 113915  bytes 164657385 (157.0 MiB)RX errors 0  dropped 0  overruns 0  frame 0TX packets 12073  bytes 970949 (948.1 KiB)TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0
  • 7:在从数据库(slave)配置主从同步(记住下面这个命令要在从(slave)数据库执行)

在Master节点中找到ens33的ip地址并放到下面的master_host中(记住这个ip是Master数据库所在的服务器ip,不是从Slave数据库的ip):

change master to master_host='192.168.184.100',master_user='slave',master_password='123456',master_port=3307,master_log_file='order-mysql-bin.000001',master_log_pos=617,master_connect_retry=30;

配置参数解析

master_host:主数据库(Master)的 ip 地址
master_user:在Master数据库中创建的用来进行同步的帐号
master_password:在Master数据库中创建的用来进行同步的帐号的密码
master_port:Master数据库的 MySQL端口号,这里是3307
master_log_file:MySQL的 binlog文件名
master_log_pos:binlog读取位置

  • 8:在从数据库(slave)查看主从同步状态:
mysql> show slave status \G;
*************************** 1. row ***************************Slave_IO_State: Master_Host: 192.168.184.100Master_User: slaveMaster_Port: 3307Connect_Retry: 30Master_Log_File: order-mysql-bin.000001Read_Master_Log_Pos: 617Relay_Log_File: 3be6e547ab4e-relay-bin.000001Relay_Log_Pos: 4Relay_Master_Log_File: order-mysql-bin.000001Slave_IO_Running: NoSlave_SQL_Running: NoReplicate_Do_DB: Replicate_Ignore_DB: Replicate_Do_Table: Replicate_Ignore_Table: Replicate_Wild_Do_Table: Replicate_Wild_Ignore_Table: Last_Errno: 0Last_Error: Skip_Counter: 0Exec_Master_Log_Pos: 617Relay_Log_Space: 154Until_Condition: NoneUntil_Log_File: Until_Log_Pos: 0Master_SSL_Allowed: NoMaster_SSL_CA_File: Master_SSL_CA_Path: Master_SSL_Cert: Master_SSL_Cipher: Master_SSL_Key: Seconds_Behind_Master: NULL
Master_SSL_Verify_Server_Cert: NoLast_IO_Errno: 0Last_IO_Error: Last_SQL_Errno: 0Last_SQL_Error: Replicate_Ignore_Server_Ids: Master_Server_Id: 0Master_UUID: Master_Info_File: /var/lib/mysql/master.infoSQL_Delay: 0SQL_Remaining_Delay: NULLSlave_SQL_Running_State: Master_Retry_Count: 86400Master_Bind: Last_IO_Error_Timestamp: Last_SQL_Error_Timestamp: Master_SSL_Crl: Master_SSL_Crlpath: Retrieved_Gtid_Set: Executed_Gtid_Set: Auto_Position: 0Replicate_Rewrite_DB: Channel_Name: Master_TLS_Version: 
1 row in set (0.15 sec)ERROR: 
No query specified

我们找到里面的Slave_IO_Running: No,Slave_SQL_Running: No属性,发现都是No的状态,证明主从同步还没有开始。。。

  • 9:在从数据库(slave)正式开启主从同步
start slave;
  • 10:再次在从数据库中查看主从同步状态
mysql> show slave status \G;
*************************** 1. row ***************************Slave_IO_State: Waiting for master to send eventMaster_Host: 192.168.184.100Master_User: slaveMaster_Port: 3307Connect_Retry: 30Master_Log_File: order-mysql-bin.000001Read_Master_Log_Pos: 617Relay_Log_File: 3be6e547ab4e-relay-bin.000002Relay_Log_Pos: 326Relay_Master_Log_File: order-mysql-bin.000001Slave_IO_Running: YesSlave_SQL_Running: YesReplicate_Do_DB: Replicate_Ignore_DB: Replicate_Do_Table: Replicate_Ignore_Table: Replicate_Wild_Do_Table: Replicate_Wild_Ignore_Table: Last_Errno: 0Last_Error: Skip_Counter: 0Exec_Master_Log_Pos: 617Relay_Log_Space: 540Until_Condition: NoneUntil_Log_File: Until_Log_Pos: 0Master_SSL_Allowed: NoMaster_SSL_CA_File: Master_SSL_CA_Path: Master_SSL_Cert: Master_SSL_Cipher: Master_SSL_Key: Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: NoLast_IO_Errno: 0Last_IO_Error: Last_SQL_Errno: 0Last_SQL_Error: Replicate_Ignore_Server_Ids: Master_Server_Id: 200Master_UUID: a606bab7-1736-11ed-9207-0242ac110002Master_Info_File: /var/lib/mysql/master.infoSQL_Delay: 0SQL_Remaining_Delay: NULLSlave_SQL_Running_State: Slave has read all relay log; waiting for more updatesMaster_Retry_Count: 86400Master_Bind: Last_IO_Error_Timestamp: Last_SQL_Error_Timestamp: Master_SSL_Crl: Master_SSL_Crlpath: Retrieved_Gtid_Set: Executed_Gtid_Set: Auto_Position: 0Replicate_Rewrite_DB: Channel_Name: Master_TLS_Version: 
1 row in set (0.09 sec)ERROR: 
No query specified

我们可以看到已经都为yes了,说明主从同步已经开启。

也可以用Navicat去连接这两个数据库。如果Navicat出现连接不了docker的mysql,则可以:

方法一:关闭防火墙(测试环境用,生产环境不可以用)

sudo systemctl stop firewalld

方法二:开放防火墙对应端口,比如master数据库的3307和slave数据库的3308(生产环境用这个)

主从同步失败问题(Slave_SQL_Running:No)
mysql> show slave status \G;
*************************** 1. row ***************************Slave_IO_State: Waiting for master to send eventMaster_Host: 192.168.184.132Master_User: slaveMaster_Port: 3307Connect_Retry: 30Master_Log_File: order-mysql-bin.000001Read_Master_Log_Pos: 3752Relay_Log_File: 2c4136668536-relay-bin.000002Relay_Log_Pos: 326Relay_Master_Log_File: order-mysql-bin.000001Slave_IO_Running: YesSlave_SQL_Running: NoReplicate_Do_DB: Replicate_Ignore_DB: Replicate_Do_Table: Replicate_Ignore_Table: Replicate_Wild_Do_Table: Replicate_Wild_Ignore_Table: Last_Errno: 1007Last_Error: Error 'Can't create database 'mall'; database exists' on query. Default database: 'mall'. Query: 'create database mall'
  • Slave_SQL_Running为No的状态,那么这是为什么呢?
  • 可以看到Last_Error: Error ‘Can’t create database ‘mall’; database exists’ on query. Default database: ‘mall’. Query: ‘create database mall’
  • 原因是主数据库(Master)和从数据库(slave)不一致造成的,我在从数据库执行了命令导致数据不一致,最终导致主从复制失败。
Slave_SQL_Running:No的解决办法

1:把主数据库和从数据库变成一模一样,也就是把多余的数据库和表删除掉,变成默认的mysql状态。(切记生产环境下要做好数据备份!!!)

2:结束同步:

stop slave;

3:再次开启同步:

start slave;

4:搞定!

mysql> show slave status \G;
*************************** 1. row ***************************Slave_IO_State: Waiting for master to send eventMaster_Host: 192.168.184.132Master_User: slaveMaster_Port: 3307Connect_Retry: 30Master_Log_File: order-mysql-bin.000001Read_Master_Log_Pos: 3752Relay_Log_File: 2c4136668536-relay-bin.000003Relay_Log_Pos: 326Relay_Master_Log_File: order-mysql-bin.000001Slave_IO_Running: YesSlave_SQL_Running: Yes
给Master和Slave的MySQL各自插入一张表⭐
数据库(orderdb1)
CREATE DATABASE orderdb1;
数据库表(orderdb1.order)
SET NAMES utf8mb4;
SET FOREIGN_KEY_CHECKS = 0;DROP TABLE IF EXISTS `order`;
CREATE TABLE `order`  (`order_id` bigint(20) NOT NULL,`order_info` varchar(255) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL,`user_id` bigint(20) NOT NULL,PRIMARY KEY (`order_id`) USING BTREE
) ENGINE = InnoDB CHARACTER SET = utf8 COLLATE = utf8_general_ci ROW_FORMAT = DYNAMIC;SET FOREIGN_KEY_CHECKS = 1;
  • 查看数据库:
    在这里插入图片描述
开始配置Sharding-Proxy读写分离⭐
  • 1:如果刚刚启动了Sharding-Proxy,则先stop一下:
[root@k8s-master bin]# pwd
/root/sharding-proxy/sharding-proxy-4.1.1/bin
[root@k8s-master bin]# ./stop.sh
  • 2:删除config-master_slave.yaml文件
rm -rf /root/sharding-proxy/sharding-proxy-4.1.1/conf/config-master_slave.yaml
  • 3:重新编辑config-master_slave.yaml文件
vi /root/sharding-proxy/sharding-proxy-4.1.1/conf/config-master_slave.yaml

内容如下:

# 设置sharding-proxy读写分离代理数据库(默认为master_slave_db)
schemaName: master_slave_db# 配置数据源()
dataSources:master_ds: # 定义一个名为master_ds的数据源url: jdbc:mysql://192.168.184.100:3307/orderdb1?serverTimezone=UTC&useSSL=falseusername: rootpassword: 123456connectionTimeoutMilliseconds: 30000idleTimeoutMilliseconds: 60000maxLifetimeMilliseconds: 1800000maxPoolSize: 50slave_ds_1: # 定义一个名为slave_ds_1的数据源url: jdbc:mysql://192.168.184.100:3308/orderdb1?serverTimezone=UTC&useSSL=falseusername: rootpassword: 123456connectionTimeoutMilliseconds: 30000idleTimeoutMilliseconds: 60000maxLifetimeMilliseconds: 1800000maxPoolSize: 50
masterSlaveRule: #这里才是真正配置读写分离的配置name: ms_ds01masterDataSourceName: master_ds #配置master主数据源名称(在上面配置数据源可以找到)slaveDataSourceNames: #配置slave从数据源的集合(在上面配置数据源可以找到)- slave_ds_1 # 从数据源名称
  • 4:启动sharding-proxy:
[root@k8s-master bin]# pwd
/root/sharding-proxy/sharding-proxy-4.1.1/bin
[root@k8s-master bin]# ./start.sh 3366
Starting the Sharding-Proxy ...
The port is 3366
The classpath is /root/sharding-proxy/sharding-proxy-4.1.1/conf:.:..:/root/sharding-proxy/sharding-proxy-4.1.1/lib/*:/root/sharding-proxy/sharding-proxy-4.1.1/lib/*:/root/sharding-proxy/sharding-proxy-4.1.1/ext-lib/*
Please check the STDOUT file: /root/sharding-proxy/sharding-proxy-4.1.1/logs/stdout.log
  • 5:application.properties:
#关闭shardingsphere-JDBC(由于我们不使用shardingsphere-JDBC所以需要先关闭)
spring.shardingsphere.enabled=false# 配置普通的JDBC数据源(去连接sharding-proxy的读写分离代理数据库master_slave_db)
spring.datasource.type=com.alibaba.druid.pool.DruidDataSource
spring.datasource.driver-class-name=com.mysql.jdbc.Driver
# 将url换成sharding-proxy代理数据库的IP和端口(3366),数据库统一换成master_slave_db(sharding-proxy的读写分离代理数据库)-----重点
spring.datasource.url=jdbc:mysql://192.168.184.100:3366/master_slave_db?useSSL=false&autoReconnect=true&characterEncoding=UTF-8&serverTimezone=UTC
# sharding-proxy的账号
spring.datasource.username=root
# sharding-proxy的密码
spring.datasource.password=root# 在映射实体或者属性时,将数据库中表名和字段名中的下划线去掉,按照驼峰命名法映射 order_id ---> orderId
mybatis-plus.configuration.map-underscore-to-camel-case=true# 这个配置一定要加(注意)
spring.main.allow-bean-definition-overriding= true
  • 6:测试方法:
 	//测试主从同步,读写分离(写操作)@Testvoid addOrder(){Order order = new Order();order.setOrderId(Long.valueOf("166666")).setOrderInfo("测试sharding-proxy主从复制-读写分离").setUserId(1002L);orderMapper.insert(order);}// 测试读写分离(读操作)@Testvoid selectOrder(){List<Order> orders = orderMapper.selectList(null);orders.forEach(System.out::println);}

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/117355.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

小知识(6) el-table表格选中行和回显行(vue3)

el-table表格选中行和回显行 官方文档说明 https://element-plus.org/zh-CN/component/table.html#table-%E6%96%B9%E6%B3%95 环境&#xff1a;vue3element-plus 选中行selection <el-table ref"baseTableRef" row-key"id" border :selection"tr…

SpringBoot整合XXL-JOB详解

❤️作者简介&#xff1a;2022新星计划第三季云原生与云计算赛道Top5&#x1f3c5;、华为云享专家&#x1f3c5;、云原生领域潜力新星&#x1f3c5; &#x1f49b;博客首页&#xff1a;C站个人主页&#x1f31e; &#x1f497;作者目的&#xff1a;如有错误请指正&#xff0c;将…

12.4 组播鼠标批量执行

组播模式相比单播模式可以提高网络的效率和带宽利用率&#xff0c;因为组播数据包只需要发送一次&#xff0c;就可以被多个接收者接收&#xff0c;而不需要每个接收者都单独发送一份数据包。这在需要同时向多个接收者发送相同数据的场景下特别有用&#xff0c;如视频会议、在线…

矢量图形编辑软件 illustrator 2023 mac 中文软件特点

illustrator 2023 mac是一款矢量图形编辑软件&#xff0c;用于创建和编辑排版、图标、标志、插图和其他类型的矢量图形。 illustrator 2023 mac软件特点 矢量图形&#xff1a;illustrator创建的图形是矢量图形&#xff0c;可以无限放大而不失真&#xff0c;这与像素图形编辑软…

Ubuntu - sudo apt update 报错源问题解决方案

sudo apt update 报错…lease’ does not have a Release file. 反正就是觉得是网络的问题 尝试添加国内清华源、阿里源 不行 尝试DNS 为8.8.8.8&#xff0c;114.114.114.114 还是不行 解决方案&#xff1a;设置里面让 Ubuntu 找到适合自己的源 1、Settings -> About…

分布式限流:Redis

目录 1:如何实现分布式限流 2:限流的几种类别 2.1:固定窗口限流 2.2:滑动窗口限流 2.3:漏桶限流 2.4:令牌桶限流 3:实现分布式限流:Redis 3.1:引入Redisson的依赖包 3.2:初始化Redisson 3.3:创建Redisson的限流类 1:如何实现分布式限流 1:把统计用户的使用频率等这些…

Spark简单回顾

星光下的赶路人star的个人主页 大鹏一日同风起&#xff0c;扶摇直上九万里 文章目录 1、Spark1.1 Spark入门1.1.1 Spark部署模式1.1.2 常用端口 1.2 SparkCore1.2.1 RDD不可变和五大属性1.2.2 RDD的弹性1.2.3 cache和Checkpoint的区别1.2.4 算子 1.3 SparkSQL1.4 内核1.4.1提交…

lv8 嵌入式开发-网络编程开发 20 域名解析与http服务实现原理

目录 1 域名解析 2 如何实现万维网服务器&#xff1f; 2.1 HTTP 的操作过程 2.2 万维网服务器实现 1 域名解析 域名解析gethostbyname函数 主机结构在 <netdb.h> 中定义如下&#xff1a; struct hostent {char *h_name; /* 官方域名 */char **h_alias…

hadoop伪分布式安装部署

首先jdk安装完毕 jdk安装文档参考&#xff1a; Linux 环境下安装JDK1.8并配置环境变量_linux安装jdk1.8并配置环境变量_Xi-Yuan的博客-CSDN博客 准备好hadoop的安装包 我的下载地址如下&#xff1a; We Transfer Gratuit. Envoi scuris de gros fichiers. 将hadoop包上传到随…

Redis数据类型——hash类型的概念及操作

1.hash类型介绍 可以理解为redis中的一个小型redis 2.v 3.hash数据类型的扩展操作 4.hash类型数据操作的注意事项

WPF中的绑定知识详解(含案例源码分享)

✅作者简介&#xff1a;2022年博客新星 第八。热爱国学的Java后端开发者&#xff0c;修心和技术同步精进。 &#x1f34e;个人主页&#xff1a;Java Fans的博客 &#x1f34a;个人信条&#xff1a;不迁怒&#xff0c;不贰过。小知识&#xff0c;大智慧。 &#x1f49e;当前专栏…

C/C++新冠疫情死亡率 2020年9月电子学会青少年软件编程(C/C++)等级考试一级真题答案解析

目录 C/C新冠疫情死亡率 一、题目要求 1、编程实现 2、输入输出 二、算法分析 三、程序编写 四、程序说明 五、运行结果 六、考点分析 C/C新冠疫情死亡率 2020年9月 C/C编程等级考试一级编程题 一、题目要求 1、编程实现 2020年全世界爆发了新冠疫情&#xff0c;请…

基于定容积法标准容器容积标定中的电动针阀自动化解决方案

摘要&#xff1a;在目前的六氟化硫气体精密计量中普遍采用重量法和定容法两种技术&#xff0c;本文分析了重量法中存在的问题以及定容法的优势&#xff0c;同时也指出定容法在实际应用中还存在自动化水平较低的问题。为了提高定容法精密计量过程中的自动化水平&#xff0c;本文…

睿趣科技:抖音小店申请流程

随着移动互联网的发展&#xff0c;越来越多的人开始尝试通过开设网店来创业。抖音作为国内最受欢迎的短视频平台之一&#xff0c;也推出了自己的电商功能——抖音小店。那么&#xff0c;如何申请抖音小店呢?下面就为大家详细介绍一下抖音小店的申请流程。 首先&#xff0c;打开…

docker环境,ubuntu18.04安装VTK8.2和PCL1.9.1

下载源码和依赖库 首先下载源码VTK8.2: Download | VTK 下载PCL1.9.1链接&#xff1a;Releases PointCloudLibrary/pcl GitHub 下载好了以后&#xff0c;先安装PCL依赖 sudo apt-get update sudo apt-get install git build-essential linux-libc-dev sudo apt-get instal…

算法通关村第十一关白银挑战——位运算符的高频算法题

大家好&#xff0c;我是怒码少年小码。 今天讲讲几个位运算的经典算法。 位移的妙用 1. 位1的个数 LeetCode 191&#xff1a;编写一个函数&#xff0c;输入是一个无符号整数&#xff08;以二进制串的形式&#xff09;&#xff0c;返回其二进制表达式中数字位数为 ‘1’ 的个…

Spring Boot集成RESTful API

在Spring Boot中集成一个RESTful API是我们在实际开发中较为常见的一种开发任务&#xff0c;以下通过一个小的案例来展示在Spring Boot中创建RESTful API来编写一个单元测试。 本节使用到的注解&#xff1a; Controller&#xff1a;修饰class&#xff0c;用来创建处理http请求的…

互联网Java工程师面试题·Spring篇·第四弹

目录 6、AOP 6.1、什么是 AOP&#xff1f; 6.2、什么是 Aspect&#xff1f; 6.3、什么是切点&#xff08;JoinPoint&#xff09; 6.4、什么是通知&#xff08;Advice&#xff09;&#xff1f; 6.5、有哪些类型的通知&#xff08;Advice&#xff09;&#xff1f; 6.6、指出…

Fedora系统的部署与MobaXterm的使用

Fedora Fedora简介 Fedora&#xff0c;Fedora Linux&#xff08;第七版以前为Fedora Core&#xff09;是由Fedora项目社区开发、红帽公司赞助&#xff0c;目标是创建一套新颖、多功能并且自由&#xff08;开放源代码&#xff09;的操作系统。Fedora是商业化的Red Hat Enterpr…

正点原子嵌入式linux驱动开发——Linux INPUT子系统

按键、鼠标、键盘、触摸屏等都属于输入(input)设备&#xff0c;Linux内核为此专门做了一个叫做input子系统的框架来处理输入事件。输入设备本质上还是字符设备&#xff0c;只是在此基础上套上了input框架&#xff0c;用户只需要负责上报输入事件&#xff0c;比如按键值、坐标等…