0x01、Redis 主从复制的实现原理是什么?

Redis 主从复制概述

Redis 的主从复制是一种机制,允许一个主节点(主实例)将数据复制到一个或多个从节点(从实例)。通过这一机制,从节点可以获取主节点的数据并与之保持同步。

复制流程
  1. 开始同步:从节点通过向主节点发送 PSYNC 命令请求同步。
  2. 全量复制:如果是第一次连接或之前的连接失效,从节点会请求进行全量复制,主节点会将当前数据快照(RDB 文件)发送给从节点。
  3. 增量复制:全量复制完成后,主从之间保持一个长连接,主节点会通过此连接将后续的写操作传递给从节点,从而确保数据一致性。

Redis 主从架构

下图展示了一个 Redis 主从架构:

复制
复制
Redis 主
Redis 从
Redis 从

在这一架构中,仅主节点可以进行写入操作,而其他从节点通过复制来保持数据的一致性。这种机制不仅保障了数据一致性,还通过将读请求分散到多个节点,提高了系统的吞吐量和可用性。

写请求
读请求
读请求
复制
复制
客户端
redis主
redis从
redis从

主从复制原理详解

Redis 的主从复制主要有两种同步方式:全量同步和增量同步。

1. 全量同步

下图描述了全量同步的流程:

主节点 从节点 psync ? -1 fullresync runid offset 执行 bgsave 传输 rdb 存储 runid offset 清空本地数据\n加载 rdb 加载完毕 缓存的新写入命令\nreplication buffer 同步缓存的新写操作 执行写入命令 主节点 从节点
  • 流程
    • 从节点发送命令 psync ? -1 触发全量同步请求。
    • 主节点接收到请求后,发现从节点传递的 run ID 为“?”(表示未知),因此判断为需要进行全量同步,并返回其自身的 run ID 以及当前的复制进度。
    • 主节点执行 bgsave 生成 RDB 文件,同时将新接收到的写入命令存储在一个名为 replication buffer 的临时缓冲区中。
    • RDB 文件生成完成后,主节点将其发送给从节点,从节点在接收后清空旧数据并加载新的 RDB 数据。
    • 加载完成后,主节点将 replication buffer 中缓存的写入命令发送给从节点,以确保数据的一致性。
2. 增量同步
  • 背景:在网络不稳定的情况下,主节点的一部分写操作可能未能成功传递给从节点。全量同步的数据量较大且耗时,因此 Redis 引入了增量同步(从 Redis 2.8 版本开始)。
  • 使用 repl_backlog_buffer
    • repl_backlog_buffer 是一个环形缓冲区,默认大小为 1 MB,用于存储主节点最近的写入命令。
    • 当从节点重新连接时,如果它的 run ID 与主节点一致,并且 offset 值在 repl_backlog_buffer 中,主节点将从缓冲区中查找相应的命令并发送给从节点,以实现增量同步。

replication buffer 与 repl_backlog_buffer 的区别

  • replication buffer

    • 每个从节点都有一个独立的 replication buffer,用于实时传输写命令。其大小是动态调整的。可以通过配置 client-output-buffer-limit 来控制其大小,以防止缓冲区过大导致的连接问题。
  • repl_backlog_buffer

    • repl_backlog_buffer 在主节点上是唯一的,主要用于存储最近的写命令,以便从节点在重新连接时能够进行部分重同步。该缓冲区的大小是固定的,主要用于支持增量同步。

通过以上设计,Redis 能够实现高可用性和高性能的数据管理。

当然可以!下面是你要的 Markdown 格式:题目和选项部分在前,所有答案和解析统一放在最后,方便做题和核对。


Redis 主从复制选择题(共 5 题)

1. 在 Redis 主从复制中,如果从节点是第一次连接主节点,或者之前的连接失效,从节点会如何进行同步?
A. 从节点会请求全量复制,主节点将当前数据快照(RDB 文件)发送给从节点  
B. 从节点会请求全量复制,主节点将当前内存快照以流的形式发送  
C. 从节点会请求主节点的 AOF 日志文件  
D. 从节点请求主节点的 replication buffer 中的数据  

2. Redis 主从复制中,以下哪个缓冲区是用于存储最近的写命令,并用于从节点重新连接进行部分重同步?
A. replication buffer  
B. client-output-buffer-limit  
C. repl_backlog_buffer  
D. psync命令缓冲区  

3. 如何避免 Redis 主从复制中频繁进行全量同步?
A. 增强主节点内存大小  
B. 增加从节点数量  
C. 增加 repl_backlog_buffer 和 client-output-buffer-limit 的大小  
D. 增加主节点 CPU 数量  

4. 对于从节点延迟较大的情况,如何控制从节点使用的内存缓冲?
A. 调整主节点的 RDB 文件生成频率  
B. 限制从节点的 client-output-buffer-limit  
C. 调整 client-output-buffer-limit 控制主节点的 replication buffer 大小  
D. 增加网络带宽  

5. 当增量同步失败后,为什么 Redis 会选择进行全量同步?
A. repl_backlog_buffer 中的数据已经被覆盖  
B. repl_backlog_buffer 中的数据被误删  
C. 主节点丢失了队列内的 runid  
D. 从节点数据损坏  

✅ 答案与解析

1. 正确答案:A
解析:当从节点首次连接或失联重新连接时,主节点会向其发送全量数据快照(RDB 文件)进行同步。


2. 正确答案:C
解析:repl_backlog_buffer 是用于部分同步的缓冲区,记录最近的写命令。


3. 正确答案:C
解析:增加相关 buffer 的大小可以有效避免 offset 被覆盖,从而减少全量同步频率。


4. 正确答案:B
解析:client-output-buffer-limit 控制从节点在主节点上的输出缓存,限制可避免资源过度消耗。


5. 正确答案:A
解析:如果从节点 offset 太旧,而 repl_backlog_buffer 已被覆盖,则只能重新进行全量同步。


本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/bicheng/77222.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

整活 kotlin + springboot3 + sqlite 配置一个 SQLiteCache

要实现一个 SQLiteCache 也是很简单的只需要创建一个 cacheManager Bean 即可 // 如果配置文件中 spring.cache.sqlite.enable false 则不启用 Bean("cacheManager") ConditionalOnProperty(name ["spring.cache.sqlite.enable"], havingValue "t…

深入探索如何压缩 WebAssembly

一、初始体积:默认 Release 构建 我们从最基础的构建开始,不开启调试符号,仅使用默认的 release 模式: $ wc -c pkg/wasm_game_of_life_bg.wasm 29410 pkg/wasm_game_of_life_bg.wasm这是我们优化的起点 —— 29,410 字节。 二…

多角度分析Vue3 nextTick() 函数

nextTick() 是 Vue 3 中的一个核心函数,它的作用是延迟执行某些操作,直到下一次 DOM 更新循环结束之后再执行。这个函数常用于在 Vue 更新 DOM 后立即获取更新后的 DOM 状态,或者在组件渲染完成后执行某些操作。 官方的解释是,当…

前端面试-自动化部署

基础概念 什么是CI/CD?在前端项目中如何应用?自动化部署相比手动部署有哪些优势?常见的自动化部署工具有哪些?举例说明它们的区别(如Jenkins vs GitHub Actions)。如何通过Git Hook实现自动化部署&#xf…

架构生命周期(高软57)

系列文章目录 架构生命周期 文章目录 系列文章目录前言一、软件架构是什么?二、软件架构的内容三、软件设计阶段四、构件总结 前言 本节讲明架构设计的架构生命周期概念。 一、软件架构是什么? 二、软件架构的内容 三、软件设计阶段 四、构件 总结 就…

GPTNet如何革新创意与效率

引言 人工智能正在以前所未有的速度改变我们的工作与生活方式,从智能写作到视觉创作,AI工具已成为不可或缺的伙伴。在众多平台中,GPTNet以其强大的功能整合和直观体验崭露头角。它不仅汇集了GPT系列、Claude、Grok、Gemini等顶级对话模型&am…

【计网】SSL/TLS核心原理

序言 在HTTP协议中,信息是明文传输的,因此为了通信安全就有了HTTPS(Hyper Text Transfer Protocol over Secure Socket Layer)协议。HTTPS也是一种超文本传送协议,在HTTP的基础上加入了SSL/TLS协议,SSL/TLS依靠证书来验证服务端的…

Web Components 开发与集成

以下是关于 Web Components 开发与集成 的系统知识梳理,涵盖核心概念、高级特性、集成与优化等内容: 一、Web Components 核心概念 技术作用核心 APICustom Elements定义可复用的自定义 HTML 元素customElements.define()、生命周期钩子(connectedCallback 等)Shadow DOM封…

day26 学习笔记

文章目录 前言一、图像颜色转换1.HSV颜色空间2.颜色转换 二、灰度化1.最大值法2.平均值法3.加权均值法 三、二值化1.全局阈值法1.阈值法(THRESH_BINARY)2.反阈值法(THRESH_BINARY_INV)3.截断阈值法(THRESH_TRUNC)4.低阈值零处理(THRESH_TOZERO)5.超阈值零处理(THRESH_TOZERO_IN…

威锋VL822-Q7T10GHUB芯片适用于扩展坞显示器

一、概述 VL822-Q7T是VIA Lab(威盛电子旗下专注于USB相关技术研发的子公司)精心打造的一款高性能USB 3.1 Gen2集线器控制器芯片。在当今数字化时代,USB接口作为设备连接与数据传输的核心通道,其性能与稳定性至关重要。VL822-Q7T凭…

华为OD机试真题——最小的调整次数/特异性双端队列(2025A卷:100分)Java/python/JavaScript/C++/C语言/GO六种最佳实现

2025 A卷 100分 题型 本文涵盖详细的问题分析、解题思路、代码实现、代码详解、测试用例以及综合分析; 并提供Java、python、JavaScript、C、C语言、GO六种语言的最佳实现方式! 2025华为OD真题目录全流程解析/备考攻略/经验分享 华为OD机试真题《最小的调…

关于 Spring Boot 微服务解决方案的对比,并以 Spring Cloud Alibaba 为例,详细说明其核心组件的使用方式、配置及代码示例

以下是关于 Spring Boot 微服务解决方案的对比,并以 Spring Cloud Alibaba 为例,详细说明其核心组件的使用方式、配置及代码示例: 关于 Spring Cloud Alibaba 致力于提供微服务开发的一站式解决方案! https://sca.aliyun.com/?spm7145af80…

常见的爬虫算法

1.base64加密 base64是什么 Base64编码,是由64个字符组成编码集:26个大写字母AZ,26个小写字母az,10个数字0~9,符号“”与符号“/”。Base64编码的基本思路是将原始数据的三个字节拆分转化为四个字节,然后…

B树、红黑树、B+树和平衡二叉树(如AVL树)的区别

B树、红黑树、B树和平衡二叉树(如AVL树)的区别及优缺点的总结: 1. 平衡二叉树(AVL树) 结构:二叉搜索树,每个节点的左右子树高度差不超过1。平衡方式:通过旋转(左旋/右旋…

Python Cookbook-6.5 继承的替代方案——自动托管

任务 你需要从某个类或者类型继承,但是需要对继承做一些调整。比如,需要选择性地隐藏某些基类的方法,而继承并不能做到这一点。 解决方案 继承是很方便的,但它并不是万用良药。比如,它无法让你隐藏基类的方法或者属…

长短期记忆网络:从理论到创新应用的深度剖析

一、引言 1.1 研究背景 深度学习在人工智能领域的发展可谓突飞猛进,而长短期记忆网络(LSTM)在其中占据着至关重要的地位。随着数据量的不断增长和对时序数据处理需求的增加,传统的神经网络在处理长序列数据时面临着梯度消失和梯…

vue3.2 + element-plus 实现跟随input输入框的弹框,弹框里可以分组或tab形式显示选项

效果 基础用法&#xff08;分组选项&#xff09; 高级用法&#xff08;带Tab栏&#xff09; <!-- 弹窗跟随通用组件 SmartSelector.vue --> <!-- 弹窗跟随通用组件 --> <template><div class"smart-selector-container"><el-popove…

C语言中冒泡排序和快速排序的区别

冒泡排序和快速排序都是常见的排序算法&#xff0c;但它们在原理、效率和应用场景等方面存在显著区别。以下是两者的详细对比&#xff1a; 一、算法原理 1. 冒泡排序 原理&#xff1a;通过重复遍历数组&#xff0c;比较相邻元素的大小&#xff0c;并在必要时交换它们的位置。…

软件信息安全性测试如何进行?有哪些注意事项?

随着信息技术的高速发展&#xff0c;软件已经成为我们生活和工作中不可或缺的一部分。然而&#xff0c;随着软件产品的广泛普及&#xff0c;软件信息安全性问题也日益凸显&#xff0c;因此软件信息安全性测试必不可少。那么软件信息安全性测试应如何进行呢?在进行过程中又有哪…

springboot集成mybaits-generator自动生成代码

文章目录 概述创建springboot项目pom文件aplication.yml代码生成类mybatis-plus提供的变量controller模板mapper模板总结 概述 创建springboot项目&#xff0c;在这里使用的是springboot 2.6.13版本&#xff0c;引入的项目依赖包如pom文件所写&#xff0c;jdk使用1.8&#xff…