保姆级教程:Redis 主从复制原理及集群搭建

😄作者简介: 小曾同学.com,一个致力于测试开发的博主⛽️,主要职责:测试开发、CI/CD
如果文章知识点有错误的地方,还请大家指正,让我们一起学习,一起进步。
😊 座右铭:不想当开发的测试,不是一个好测试✌️。
如果感觉博主的文章还不错的话,还请点赞、收藏哦!👍

文章目录

  • 一 什么是 Redis 主从复制❓
  • 二 Redis 主从集群搭建👊
  • 三 数据同步原理🙏
    • 3.1 全量同步✨
    • 3.2 增量同步 ✨

一 什么是 Redis 主从复制❓

简而言之就是一个节点负责写数据(主节点),其他节点负责读数据(从节点),采用负载均衡的集群方式,实现读写分离,更好的解决并发问题。

二 Redis 主从集群搭建👊

因为单节点 Redis 的并发能力是有上限的,要进一步提高 Redis 的并发能力,就需要搭建主从集群,实现读写分离。本篇实例架构图如下图所示:
在这里插入图片描述
一个主节点,两个从节点,我们现在 tmp 文件下创建三个文件夹,分别是 6001、6002、6003,文件名也就是我们 redis 服务的端口号,可自行随意定义。

➜  ~ mkdir tmp
➜  ~ cd tmp
➜  tmp mkdir 6001 6002 6003

如果你本地已经安装了 Redis,需要拷贝 Redis 的配置文件到上述三个文件夹下,我本地的 Redis 的配置文件在/usr/local/etc/redis.conf,当然也可以一键拷贝,

echo 6001 6002 6003 | xargs -t -n 1 cp /usr/local/etc/redis.conf

拷贝完成之后,需要分别修改配置文件中的以下内容:

(1)修改端口号

找到配置文件中port 6379 ,分别修改为port 6001,port 6002,port 6003

当然也可以一键修改

sed -i -e 's/6379/6001/g' 6001/redis.conf 
sed -i -e 's/6379/6002/g' 6002/redis.conf 
sed -i -e 's/6379/6003/g' 6003/redis.conf 

(2)修改工作目录

找到配置文件中的dir .目录,修改为dir /temp/6001

(3)声明 IP 地址

我们在每个配置文件中第一行写入 replica-announce-ip "127.0.0.1" ,其中127.0.0.1,你可以换成你本地 IP 地址,本行表示配置分布式系统或网络中的某个节点或副本的 IP 地址。

接下来,我们要开启主从配置

主从配置可使用replicaof或者slaveof命令,

replicaof <主机> <端口>
replicaof 127.0.0.1 6379
# 或者
slaveof <主机> <端口>
slaveof 127.0.0.1 6379

主从关系有两种模式,临时模式和永久模式

  • 永久模式

    在 redis.conf 中添加配置:slaveof

  • 临时模式

    使用 redis-cli 客户端连接到 redis 服务,执行 slaveof 或者 replicaof 命令(重启后生效)

slaveof<masterip> <masterport>

在本篇文章中我们采用临时模式

第一步:启动 Redis server 服务
开启三个命令窗口,分别执行以下命令

redis-server 6001/redis.conf
redis-server 6002/redis.conf
redis-server 6003/redis.conf

我们选择 6001 端口节点作为 master 节点,开启命令行窗口,连接 redis 服务,

#命令行窗口1
➜  ~ redis-cli -p 6002
127.0.0.1:6002>replicaof 127.0.0.1 6001
# 表示6001节点作为6002的master节点
#命令行窗口2
➜  ~ redis-cli -p 6003
127.0.0.1:6003>replicaof 127.0.0.1 6001
# 表示6001节点作为6003的master节点# 建立主从关系后,可以进入6001客户端进行查看
#命令行窗口3
➜  ~ redis-cli -p 6001
127.0.0.1:6001>info replication

详细结果如下图,展示了当前节点为master节点,绑定了两个从节点,两个从节点均在线状态
在这里插入图片描述
此时我们在 master 节点中进行写数据

# 在主节点写入
127.0.0.1:6001>set num 123456
OK#在从节点获取值
127.0.0.1:6002> get num
"123456"127.0.0.1:6003>get num
"123456"# 如果在从节点写入,则会报错
127.0.0.1:6002> set name zeng
(error) READONLY You can't write against a read only replica.

至此,Redis 主从集群就搭建完毕了。接下来我们来聊聊主从间数据是如何同步的

三 数据同步原理🙏

3.1 全量同步✨

主从第一次同步称为全量同步,那么 master 节点是如何判断从节点(slave)是第一次来同步数据的呢,这块有两个比较重要的概念:

  • Replication ld:简称 replid,是数据集的标记,id 一致则说明是同一数据集。每一个 master 都有唯一的 replid,slave 则会继承 master 节点的 replid

  • offset:偏移量,随着记录在 repl_baklog 中的数据增多而逐渐增大,slave 完成同步时也会记录当前同步的 offset。如果 slave 的 offset 小于 master 的 ofset,说明 slave 数据落后于 master,需要更新。

因此 slave 做数据同步,必须向 master 声明自己的 replication id 和 offset, master 才可以判断到底需要同步哪些数据。
在这里插入图片描述
全量同步流程可以概括为以下流程:

(1)slave 节点请求增量同步

(2)master 节点判断 replid,发现不一致,则拒绝增量同步

(3)master 将完整内存数据生成 RDB,发送 RDB 到 slave

(4)slave 清空本地数据,加载 master 的 RDB

(5) master 将 RDB 期间的命令记录在 repl_baklog,并持续将 log 中的命令发送给 slave

(6)slave 执行接收到的命令,保持与 master 之间的同步。

在这里插入图片描述
(上图中左图是从节点 slave,右图是 master 节点)

3.2 增量同步 ✨

主从第一次同步称为全量同步,但如果 slave 重启后同步,则执行增量同步。流程如下:

在这里插入图片描述

slave 提交自己的 offset 到 master,master 获取 repl_baklog 中从 offset 之后到命令给 slave。

思考🤔:slave 节点宕机恢复后可以找 master 节点同步数据,那么 master 节点宕机该怎么办呢?那么 Redis 哨兵就要闪耀登场了,请参考 Redis 哨兵相关文章。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/diannao/22774.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

线程池的工作原理

文章目录 一、应用场景二、工作原理三、主要函数 一、应用场景 传统并发变成的缺陷&#xff1a; 1.创建和销毁线程上花费的时间和消耗的系统资源&#xff0c;甚至可能要比花在处理实际的用户请求的时间和资源要多得多 2. 活动的线程需要消耗系统资源&#xff0c;如果启动太多&…

Python基础教程教材:从入门到精通的全方位解析

Python基础教程教材&#xff1a;从入门到精通的全方位解析 Python&#xff0c;作为一门强大的编程语言&#xff0c;正日益受到全球开发者的青睐。无论是数据分析、人工智能还是Web开发&#xff0c;Python都展现出其独特的魅力。然而&#xff0c;对于初学者来说&#xff0c;如何…

新规:互联网政务应用安全管理规定将于7月1日正式执行

随着互联网技术的快速发展&#xff0c;政务服务也逐渐向数字化、智能化、便捷化转型。为了保障互联网政务应用的安全&#xff0c;保障公民信息不被泄露&#xff0c;为了让大家放心&#xff0c;我国政府出台了互联网政务应用安全管理规定。此规定将于24年7月1日正式执行。 1、规…

安卓自动化之minicap截图

安卓自动化之minicap截图 关于安卓自动化使用找图方法点击时&#xff0c;最大的痛点是使用原生adb截图速度太慢了&#xff0c;大概需要3s的时间&#xff0c;再加上我们使用opencv的找图算法&#xff0c;时间就去都三秒多了&#xff0c;为了解决这一个痛点&#xff0c;我们就可…

HBase数据库面试知识点:第二部分 - 核心技术(持续更新中)

目录 1. 分布式存储与HDFS 2. 面向列的存储 3. 数据版本控制 4. Region与RegionServer 5. 分布式协调服务&#xff08;ZooKeeper&#xff09; 1. 分布式存储与HDFS HBase利用Hadoop的HDFS作为其底层存储系统&#xff0c;确保数据的高可靠性和可扩展性。 数据块&#xff0…

Python爬虫如何入门:一步步走向精通的指南

Python爬虫如何入门&#xff1a;一步步走向精通的指南 在信息爆炸的时代&#xff0c;爬虫技术已经成为获取、整理和分析数据的必备技能。Python&#xff0c;以其简洁易懂的语法和强大的库支持&#xff0c;成为了爬虫开发的热门语言。那么&#xff0c;如何入门Python爬虫呢&…

研发质量测试工程师的笔试题

研发质量测试工程师的笔试题通常会考察候选人在测试理论、测试方法、测试工具使用以及实际案例分析等方面的知识和能力。以下是一些可能出现在研发质量测试工程师笔试中的题目类型和内容&#xff1a; 一、测试理论题 请简述软件测试的目的和基本原则。描述黑盒测试和白盒测试…

Python | 句子缩写

字符串大小的比较Unicode码值 类似于asc|| 码 小写字母从 a 到 z 对应的 Unicode 码值是从 97 到 122&#xff0c;而大写字母从 A 到 Z 对应的 Unicode 码值是从 65 到 90, 大小写字母之间的差值为32&#xff0c;所以可以通过数学运算将小写字符减去32后转换为大写字符。 字…

26、matlab多项式曲线拟合:polyfit ()函数

1、polyfit 多项式曲线拟合 语法 语法&#xff1a;p polyfit(x,y,n) 返回次数为 n 的多项式 p(x) 的系数&#xff0c;该阶数是 y 中数据的最佳拟合&#xff08;基于最小二乘指标&#xff09;。 语法&#xff1a;[p,S] polyfit(x,y,n) 还返回一个结构体 S 语法&#xff1a;[…

优化 mac 储存空间的方法 只需一招为你的苹果电脑提速

在职场中&#xff0c;许多人都对苹果电脑情有独钟。苹果电脑以其简洁美观的设计、流畅稳定的性能以及出色的用户体验&#xff0c;成为了众多职场人士的得力助手。无论是处理文档、制作演示文稿&#xff0c;还是进行创意设计等工作&#xff0c;苹果电脑都能展现出其独特的优势&a…

微信小程序公众号二合一分销商城源码系统 基于PHP+MySQL组合开发的 可多商户商家入驻 带完整的安装代码包以及搭建教程

系统概述 微信小程序公众号二合一分销商城源码系统&#xff0c;是基于PHPMySQL组合开发的一款高效、稳定的电子商务平台解决方案。该系统创新性地将微信公众号与小程序的功能进行了深度整合&#xff0c;为商家提供了一个功能齐全、易于管理的分销商城系统。通过此系统&#xf…

Vue3+vant 带你实现常见的历史记录的业务功能

前言 大部分小伙伴不管是开发PC端还是H5移动端&#xff0c;都会遇到历史搜索的功能。对用户的历史记录进行增删查可以是接口&#xff0c;也可以是前端用缓存实现&#xff0c;一般用浏览器缓存实现的比较多&#xff0c;这篇文章就来教你如何用LocalStorage对历史记录数据的存储、…

视创云展元宇宙虚拟展厅,带来沉浸式的逛展体验!

近年来&#xff0c;随着科技的飞速发展和市场需求的不断演变&#xff0c;众多企业纷纷将目光转向线上虚拟展厅的建设。视创云展元宇宙虚拟展厅凭借其创新性和实用性&#xff0c;为众多企业带来了前所未有的宣传体验&#xff0c;成为了商企展示自我、推广产品的全新舞台。 与传统…

Java 生成SSL证书

第一步&#xff1a; cmd打开指令窗口 第二步&#xff1a; 运行指令&#xff1a; keytool -keystore hk.jks -storepass 123456 -deststoretype jks -genkeypair -keyalg RSA -validity 365 -alias contrastserver -dname "CN111.230.63.59, OUHK, OHK, LZH, STGD, CCN&…

XSKY对象存储深度结合Alluxio分布式缓存系统,GPU利用率提高至90%以上

近日&#xff0c;Alluxio分布式缓存系统完成了与XSKY星辰天合的 XEOS V6.4 对象存储的兼容性测试&#xff0c;旨在解决数据管理和加速方面的挑战。双方进行了深度的产品对接和联合开发&#xff0c;将 Alluxio 分布式缓存系统与 XEOS 对象存储的众多应用特性进行结合&#xff0c…

MySQL学习——INFORMATION_SCHEMA触发器表

TRIGGERS表提供了有关触发器的信息。要查看有关表触发器的信息&#xff0c;必须具有该表的TRIGGER权限。 TRIGGERS表包含以下列&#xff1a; TRIGGER_CATALOG&#xff1a;触发器所属的目录名称。此值始终为def。 TRIGGER_SCHEMA&#xff1a;触发器所属的架构&#xff08;数据…

工厂模式 使用全局变量自己注册

前言 使用工厂模式时&#xff0c;需要将类注册进工厂里&#xff0c;看到一种新的奇技淫巧&#xff0c;使用静态变量来将类注册进工厂。代码 Product.h #ifndef PRODUCT_H #define PRODUCT_Hclass Product { public:Product(){};virtual ~Product(){};virtual void doWork() …

38. 【Java教程】日期和时间处理

本小节我们将学习 Java 中的日期和时间&#xff0c;日期和时间在我们的实际开发中非常常用&#xff0c;例如用户的注册、数据的增删改、对敏感信息的操作等等都需要记录下日期和时间。通过本小节的学习&#xff0c;你将了解到什么是日期、什么是时间、什么是时区&#xff0c;Ja…

分享一个fpga任意分频的代码

分享一个fpga任意分频的代码&#xff0c;非50%占空比的分频代码&#xff0c; 这里以16以内 的分频为例 module clkdiv #(parameter div 4)(input clk,input rst,//input [3:0] div,output reg clk_div );//reg …

3072. 将元素分配到两个数组中 II

题目 给你一个下标从 1 开始、长度为 n 的整数数组 nums 。 现定义函数 greaterCount &#xff0c;使得 greaterCount(arr, val) 返回数组 arr 中 严格大于 val 的元素数量。 你需要使用 n 次操作&#xff0c;将 nums 的所有元素分配到两个数组 arr1 和 arr2 中。在第一次操…