MySQL 主从读写分离入门——基本原理以及ProxySQL的简单使用

一、读写分离工作原理

读写分离的工作原理：在大型网站业务中，当单台数据库无法满足并发需求时，通过主从同步方式同步数据。设置一台主服务器负责增、删、改，多台从服务器负责查询，从服务器从主服务器同步数据以保持一致性，从而提高数据库的并发和负载能力。

简单来说，读写分离就是将数据库操作分为“读”和“写”两部分，分别由不同的服务器处理。主服务器（通常是单台）主要负责处理写操作（如插入、更新、删除），而从服务器（通常是多台）则主要负责处理读操作（如查询）。主从服务器之间通过主从同步机制保持数据的一致性。通过这种方式，可以显著提高数据库的并发处理能力和负载能力，从而减轻单台服务器的压力。

二、通过ProxySQL对读写分离进行浅层面的理解和运用

1、实验环境：

机器名称IP配置服务角色备注
proxy192.168.20.149proxysql控制器用于监控管理
master192.168.20.150数据库主服务器
slave1192.168.20.146数据库从服务器
slave2192.168.20.148数据库从服务器

 2、实现数据库主从复制

基于GTID实现mysql8.0主从同步，配置过程略。

基本命令：

开启gtid，并设置server_id值
gtid_mode=ON
enforce-gtid-consistency=ON

建立主从同步

mysql> CHANGE MASTER TO
     >     MASTER_HOST = host,
     >     MASTER_PORT = port,
     >     MASTER_USER = user,
     >     MASTER_PASSWORD = password,
     >     MASTER_AUTO_POSITION = 1;

mysql> START SLAVE;

mysql> show slave status \G

........
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes

..........
 

查看slave，双yes就代表成功

3、安装ProxySQL

本人博客另外一篇文章可以直接拿

yum install -y proxysql

启动 ProxySQL

[root@proxy ~]# systemctl enable --now proxysql
#先启服务，只需要mysql客户端，直接下mariadb就行了
# 管理员登录
[root@proxy ~]# mysql -uadmin -padmin -h 127.0.0.1 -P 6032

 成功登录后可以查看一下库看看是否正常

4、配置 ProxySQL 所需账户

在 Master (192.168.20.150) 的MySQL 上创建 ProxySQL 的监控账户和对外访问账户

create user 'monitor'@'192.168.%.%' identified with mysql_native_password by 'Monitor@123.com';
grant all privileges on *.* to 'monitor'@'192.168.%.%' with grant option;#proxysql 的对外访问账户
create user 'proxysql'@'192.168.%.%' identified with mysql_native_password by '123456';
grant all privileges on *.* to 'proxysql'@'192.168.%.%' with grant option;

5、配置proxySQL

创建组：(定义写为1，读为0)

MySQL [(none)]> insert into mysql_replication_hostgroups (writer_hostgroup,reader_hostgroup,comment) values (1,0,'proxy');
Query OK, 1 row affected (0.00 sec)MySQL [(none)]> load mysql servers to runtime;
Query OK, 0 rows affected (0.01 sec)MySQL [(none)]> save mysql servers to disk;
Query OK, 0 rows affected (0.02 sec)

注意：ProxySQL会根据server的read_only的取值将服务器进行分组。read_only=0的server，master被分到编号为1的写组，read_only=1的server，slave则分到编号为0的读组

所以创建完成之后需要在两个从服务器配置文件（/etc/my.cnf）添加read_noly=1。

MySQL [(none)]> select * from mysql_replication_hostgroups;
+------------------+------------------+------------+---------+
| writer_hostgroup | reader_hostgroup | check_type | comment |
+------------------+------------------+------------+---------+
| 1                | 0                | read_only  | proxy   |
+------------------+------------------+------------+---------+
1 row in set (0.00 sec)

通过查询我们可以清晰的看到我们所分的组

添加主从服务器节点：

在proxySQL端添加主从服务器的节点，并保存

MySQL [(none)]> insert into mysql_servers(hostgroup_id,hostname,port) values (1,'192.168.20.150',3306);
Query OK, 1 row affected (0.00 sec)MySQL [(none)]> insert into mysql_servers(hostgroup_id,hostname,port) values (0,'192.168.20.146',3306);
Query OK, 1 row affected (0.00 sec)MySQL [(none)]> insert into mysql_servers(hostgroup_id,hostname,port) values (0,'192.168.20.148',3306);
Query OK, 1 row affected (0.00 sec)MySQL [(none)]> load mysql servers to runtime;
Query OK, 0 rows affected (0.01 sec)MySQL [(none)]> save mysql servers to disk;
Query OK, 0 rows affected (0.00 sec)

 重要的信息是要保证主从服务器都是online状态

为ProxySQL监控MySQL后端节点

MySQL [(none)]> use monitor
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -ADatabase changed
MySQL [monitor]> set mysql-monitor_username='monitor';
Query OK, 1 row affected (0.00 sec)MySQL [monitor]> set mysql-monitor_password='Monitor@123.com';
Query OK, 1 row affected (0.00 sec)修改后，保存到runtime和disk
MySQL [monitor]> load mysql variables to runtime;
MySQL [monitor]> save mysql variables to disk;查看监控账号【ProxySQL】
SELECT * FROM global_variables WHERE variable_name LIKE 'mysql-monitor_%';
//也可以这样快速定位
MySQL [(none)]> select @@mysql-monitor_username;
+--------------------------+
| @@mysql-monitor_username |
+--------------------------+
| monitor                  |
+--------------------------+
1 row in set (0.00 sec)
MySQL [(none)]> select @@mysql-monitor_password;
+--------------------------+
| @@mysql-monitor_password |
+--------------------------+
| Monitor@123.com          |
+--------------------------+
1 row in set (0.00 sec)

验证监控信息

ProxySQL 监控模块的指标都保存在monitor库的log表中 以下是连接是否正常的监控，对connect指标的监控 ，在前面可能会有很多connect_error，这是因为没有配置监控信息时的错误，配置后如果connect_error的结果为NULL则表示正常

心跳信息的监控

 

 查看read_only日志监控：

MySQL [(none)]> select * from mysql_server_read_only_log;

Monitor 模块就会开始监控后端的read_only值，当监控到read_only值，就会按照read_only的值将某些节点自动移到读写组 
一些监控的状态斗志在log相关，都在monitor库下面的 global_variables 变量。 

 ProxySQL配置对外访问账号

前面已经配置：配置ProxySQL 账户，我创建的对外访问账户是：用户：proxysql，密码：123456

将对外访问账号添加到mysql_users表中：

MySQL [monitor]> insert into mysql_users (username,password,default_hostgroup,transaction_persistent) values ('proxysql','123456',1,1);
Query OK, 1 row affected (0.000 sec)MySQL [monitor]> load mysql users to runtime;
Query OK, 0 rows affected (0.000 sec)MySQL [monitor]> save mysql users to disk;
Query OK, 0 rows affected (0.007 sec)MySQL [monitor]> select * from mysql_users\G
*************************** 1. row ***************************username: proxysqlpassword: 123456active: 1use_ssl: 0default_hostgroup: 1default_schema: NULLschema_locked: 0
transaction_persistent: 1fast_forward: 0backend: 1frontend: 1max_connections: 10000attributes: comment: 
1 row in set (0.000 sec)

注：transaction_persistent 如果为1，则一个完整的SQL只可能路由到一个节点；这点非常重要，主要解决这种情况：一个事务有混合的读操作和写操作组成，事务未提交前，如果事务中的读操作和写操作路由到不同节点，那么读取到的结果必然是脏数据。所以一般情况下，该值应该设置为1，尤其是业务中使用到事务机制的情况（默认为0）

6、测试主从同步

[root@slave1 ~]# mysql -h192.168.20.149 -uproxysql -p'123456' -P 6033
mysql: [Warning] Using a password on the command line interface can be insecure.
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 3
Server version: 5.5.30 (ProxySQL)Copyright (c) 2000, 2022, Oracle and/or its affiliates.Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| db1                |
| information_schema |
| mysql              |
| performance_schema |
| sys                |
+--------------------+
5 rows in set (0.01 sec)mysql> select @@server_id;
+-------------+
| @@server_id |
+-------------+
|          21 |
+-------------+
1 row in set (0.00 sec)#通过proxysql用户，创建一个keme库
mysql> create database keme;
Query OK, 1 row affected (0.00 sec)

在slave2：192.168.20.148上去验证一下，是否同步过去keme这个库

7、添加简单的读写分离规则

MySQL [monitor]> insertintomysql_query_rules(rule_id,active,match_pattern,destination_hostgroup,apply) values(1,1,'^select .* for update$',1,1);
l query rules to runtime;
save mysql query rulQuery OK, 1 row affected (0.000 sec)es to disk;MySQL 
[monitor]> 
MySQL [monitor]> insert into  values(2,1,'^select',0,1);mysql_query_rules(rule_id,active,match_pattern,destination_hostgroup,apply)
Query OK, 1 row affected (0.000 sec)MySQL [monitor]> load mysql query rules to runtime;
Query OK, 0 rows affected (0.000 sec)MySQL [monitor]> save mysql query rules to disk;
Query OK, 0 rows affected (0.006 sec)

8.测试读写分离

读操作：

 写操作：

简单的读写分离实验就结束了。 

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/714633.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

C语言数据结构——队列

C语言数据结构——队列

目录 0.前言 1.队列的基本概念 2.队列的实现 2.1实现方式 2.2具体实现 3.队列的应用场景 4.一道队列的算法题（LeetCode225. 用队列实现栈） 5.结语 （图像由AI生成） 0.前言 在计算机科学领域，数据结构是组织和…
阅读更多...
Linux篇: 进程控制

Linux篇: 进程控制

一、进程创建 1.1 fork函数初识 在Linux中，fork函数是非常重要的函数，它从已存在进程中创建一个新进程。新进程为子进程，而原进程为父进程。 返回值： 在子进程中返回0，父进程中返回子进程的PID，子进程创…
阅读更多...
OSI七层模型/TCP四层模型

OSI七层模型/TCP四层模型

协议： 协议是双方共同指定的一组规则，在网络通信中表示通信双方传递数据和解释数据的一组规则。 从A上传文件到服务器B,需要在A和B之间制定一个双方都认可的规则，这个规则就叫文件传输协议，该协议是ftp协议的一个初级版本&#…
阅读更多...
LeetCode 刷题 [C++] 第226题.翻转二叉树

LeetCode 刷题 [C++] 第226题.翻转二叉树

题目描述 给你一棵二叉树的根节点 root ，翻转这棵二叉树，并返回其根节点。 题目分析 深度优先搜索（DFS）- 递归方式 对于二叉树的镜像问题，很容易想到的就是使用递归来解决，自底向上依次翻转每一个节点…
阅读更多...
2024年腾讯云优惠券领取页面_代金券使用方法_新老用户均可

2024年腾讯云优惠券领取页面_代金券使用方法_新老用户均可

腾讯云代金券领取渠道有哪些？腾讯云官网可以领取、官方媒体账号可以领取代金券、完成任务可以领取代金券，大家也可以在腾讯云百科蹲守代金券，因为腾讯云代金券领取渠道比较分散，腾讯云百科txybk.com专注汇总优惠代金券领取页面&am…
阅读更多...
百度SEO快排原理是什么？如何快速排名方法？

百度SEO快排原理是什么？如何快速排名方法？

前言：我之前说过我不打算写这个快速排序。 首先，我从来没有在自己的网站上操作过所谓的快速排序。 其次，我不能像网上很多人写的那样透露百度快速排序的秘密（说实话，你可以透露秘密）。 方法是有了&#xff…
阅读更多...
Postman： 前端必备工具还是后端独享利器

Postman： 前端必备工具还是后端独享利器

Postman 的使用场景：适用于前端和后端 Postman 是一个流行的 API 测试与开发工具。它被广泛地应用在前后端开发的过程中，但是很多人对于它的使用场景存在疑惑。那么，到底是前端用还是后端用呢？本文将从多个角度详细解答这个问题。…
阅读更多...
【嵌入式——QT】QListWidget

【嵌入式——QT】QListWidget

QListWidget类提供了一个基于项的列表小部件，QListWidgetItem是列表中的项，该篇文章中涉及到的功能有添加列表项，插入列表项，删除列表项，清空列表，向上移动列表项，向下移动列表项。 常用API a…
阅读更多...
C语言数据结构基础——双链表专题

C语言数据结构基础——双链表专题

前言 书接上回，双链表便是集齐带头、双向、循环等几乎所有元素的单链表PLUS. 1.初始化、创建双链表 typedef int LTDataType; typedef struct LTNode {LTDataType data;struct LTNode* next;struct LTNode* prev; }LTNode; 不同于单链表，此时每个节点应…
阅读更多...
PySide6+VSCode Python可视化环境搭建

PySide6+VSCode Python可视化环境搭建

#记住在cmd中运行，不要在vscode里运行，否则env会装到工程目录下 python -m venv env #env\Scripts\activate.bat pip install pyside6 下载本期源码 vscode装一个PYQT Integration插件，设置好两个路径（下面有个脚本用于获取路径&…
阅读更多...
MySQL 数据库表设计和优化

MySQL 数据库表设计和优化

一、数据结构设计 正确的数据结构设计对数据库的性能是非常重要的。 在设计数据表时，尽量遵循一下几点： 将数据分解为合适的表，每个表都应该有清晰定义的目的，避免将过多的数据存储在单个表中。使用适当的数据类型来存储数据&…
阅读更多...
挑战杯 基于机器视觉的车道线检测

挑战杯 基于机器视觉的车道线检测

文章目录 1 前言2 先上成果3 车道线4 问题抽象(建立模型)5 帧掩码(Frame Mask)6 车道检测的图像预处理7 图像阈值化8 霍夫线变换9 实现车道检测9.1 帧掩码创建9.2 图像预处理9.2.1 图像阈值化9.2.2 霍夫线变换 最后 1 前言 🔥 优质竞赛项目系列，今天要分…
阅读更多...
范伟：你们怎么老提1,200呢,有什么典故啊?赵本山：没有啊！

范伟：你们怎么老提1,200呢,有什么典故啊?赵本山：没有啊！

范伟：你们怎么老提1,200呢,有什么典故啊?赵本山：没有啊！ --小品《面子》（中3）的台词 表演者：赵本山 高秀敏 范伟 （接上） 范伟：哎吃啊 赵：哎呀这电视看的挺…
阅读更多...
cAdvisor+Prometheus+Grafana 搞定Docker容器监控平台

cAdvisor+Prometheus+Grafana 搞定Docker容器监控平台

cAdvisorPrometheusGrafana cAdvisorPrometheusGrafana 搞定Docker容器监控平台1、先给虚拟机上传cadvisor2、What is Prometheus?2.1、架构图 3、利用docker安装普罗米修斯4、安装grafana cAdvisorPrometheusGrafana 搞定Docker容器监控平台 1、先给虚拟机上传cadvisor cAd…
阅读更多...
MySQL事务和锁机制

MySQL事务和锁机制

MySQL技术——事务和锁机制 一、事务（1）概述（2）ACID特性（3）事务并发存在的问题（4）事务的隔离级别 二、锁机制（1）锁的力度（2）表的分类&…
阅读更多...
网络编程-编码与解码(Protobuf)

网络编程-编码与解码(Protobuf)

编码与解码 下面的文字都来自于极客时间 为什么要编解码呢？因为计算机数据传输的是二进制的字节数据 解码：字节数据 --> 字符串（字符数据） 编码：字符串（字符数据）–> 字节数据 我们在编…
阅读更多...
公共字段自动填充

公共字段自动填充

在开发中经常面临对于一些公共字段的赋值。 如在下表中： 如何让程序自动为我们需要赋值的公共字段进行赋值，避免在业务代码中重复写这些公共字段的赋值代码 如下图所示： 实现思路： 1.自定义注解AutoFill，用于标识需…
阅读更多...
linux环境安装cuda toolkit

linux环境安装cuda toolkit

1 全新安装 如果环境中没安装过cuda版本， 这种情况下比较简单。 直接在https://developer.nvidia.com/cuda-toolkit-archive选择对应版本下载安装即可。 如下为安装cuda toolkit 11.8. 2 环境中已经存在其他版本 这种情况下比较复杂一些。 首先要确认最高支持的…
阅读更多...
李沐动手学习深度学习——4.2练习

李沐动手学习深度学习——4.2练习

1. 在所有其他参数保持不变的情况下，更改超参数num_hiddens的值，并查看此超参数的变化对结果有何影响。确定此超参数的最佳值。 通过改变隐藏层的数量，导致就是函数拟合复杂度下降，隐藏层过多可能导致过拟合，而过少导…
阅读更多...
【MySQL】表的内连和外连（重点）

【MySQL】表的内连和外连（重点）

表的连接分为内连和外连。 一、内连接 内连接实际上就是利用 where 子句对两种表形成的笛卡儿积进行筛选，前面学习的查询都是内连接，也是在开发过程中使用的最多的连接查询。 select 字段 from 表1 inner join 表2 on 连接条件 and 其他条件; 注意&…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023