Redis 主从复制,哨兵模式,集群

目录

主从复制

主从复制

作用

缺陷

主从复制流程

实现Redis主从复制

哨兵模式

主从复制切换的缺点

哨兵的核心功能

哨兵模式原理

哨兵模式的作用

哨兵结构组成

故障转移机制

主节点的选举

实现哨兵模式

集群(Cluster)


redis群集有三种模式,主从复制,哨兵模式,集群(Cluster)

主从复制

主从复制

主从复制是高可用Redis的基础,哨兵和集群都是在主从复制基础上实现高可用的。主从复制主要实现了数据的多机备份,以及对于读操作的负载均衡和简单的故障恢复。

主从复制具体是指将一台redis服务器的数据,复制到其他的Redis服务器,前者称为主节点(master),后者称为从节点(slave),数据复制是单向的,只能由主节点到从节点。

默认情况下,每台Redis服务器都是主节点;且一个主节点可以有多个从节点(或没有从节点),但一个从节点只能有一个主节点。

作用

数据冗余:主从复制实现了数据的热备份,是持久化之外的一种数据冗余方式

故障恢复:当主节点出现问题时,可以由从节点提供服务,实现快速的故障恢复

负载均衡:在主从复制的基础上,配合读写分离,可以由主节点提供写服务,从节点提供读服务,分担服务器负载,尤其是在写少读多的情况下,通过多个从节点分担读负载,可以大大提高Redsi服务器的并发量

高可用基石:主从复制是哨兵和集群能够实施的基础,是Redis高可用的基础

缺陷

故障无法自动化,写操作无法负载均衡,存储能力受到单机限制

主从复制流程

如果启动一个slave进程,则他会向master机器发送一个"sync command"命令,请求同步链接

无论是第一次连接还是重新连接,master机器都会启动一个后台进程,将数据快照保存到数据文件中(执行rdb操作),同时master 还会记录修改数据的所有命令并缓存到数据文件中

后台进程完成缓存操作之后,master机器就会向slave机器发生数据文件,slave端机器将数据文件保存到硬盘上,然后将其加载到内存中,接着master机器会将修改数据的所有操作一并发给slave机器,若slave机器出现故障宕机,则恢复故障后重新连接

master机器收到slave端机器的连接后,将其完整的数据文件发送给slave机器,如果master同时收到多个slave发来的同步请求,则master会在后台启动一个进程保存数据文件,然后将其发送给所有的slave端机器,确保所有的slave机器都正常

实现Redis主从复制

master:192.168.94.7

slave1:192.168.94.8

slave2:192.168.94.9

主配置

bind 0.0.0.0                                   70行,修改监听地址为0.0.0.0
daemonize yes                             137行,开启守护进程
logfile /var/log/redis_6379.log       172行,指定日志文件目录
dir /var/lib/redis/6379                     264行,指定工作目录
appendonly yes                             700行,开启AOF持久化功能
 

vim /etc/redis/6379.conf

/etc/init.d/redis_6379 restart

从配置

两台从配置一样
bind 0.0.0.0                                70行,修改监听地址为0.0.0.0
daemonize yes                          137行,开启守护进程
logfile /var/log/redis_6379.log    172行,指定日志文件目录
dir /var/lib/redis/6379                  264行,指定工作目录        
replicaof 192.168.94.7 6379     288行,指定要同步的Master节点IP和端口
appendonly yes                          700行,开启AOF持久化功能
vim /etc/redis/6379.conf

查看主从状态

测试

哨兵模式

主从复制切换的缺点

当服务器宕机后,需要手动一台从机切换为主机,这需要人工干预,不仅费时费力而且还会造成一段时间内服务不可用。

为了解决主从复制的缺点,就有了哨兵机制。

哨兵的核心功能

在主从复制的基础上,哨兵引入了主节点的自动故障转移

哨兵模式原理

哨兵(sentinel):是一个分布式系统,用于对主从结构中的每台服务器进行监控,当出现故障时通过投票机制选择新的 Master并将所有slave连接到新的 Master。所以整个运行哨兵的集群的数量不得少于3个节点。

哨兵模式的作用

监控:哨兵会不断地检查主节点和从节点是否运作正常。

自动故障转移:当主节点不能正常工作时,哨兵会开始自动故障转移操作,它会将失效主节点的其中一个从节点升级为新的主节点,并让其它从节点改为复制新的主节点。

通知(提醒):哨兵可以将故障转移的结果发送给客户端。


哨兵结构组成

哨兵节点和数据节点

哨兵节点:哨兵系统由一个或多个哨兵节点组成,哨兵节点是特殊的redis节点,不存储数据。

数据节点:主节点和从节点都是数据节点。


故障转移机制

1.由哨兵节点定期监控发现主节点是否出现了故障,每个哨兵节点每隔1秒会向主节点、从节点及其它哨兵节点发送一次ping命令做一次心跳检测。如果主节点在一定时间范围内不回复或者是回复一个错误消息,那么这个哨兵就会认为这个主节点主观下线了(单方面的)。当超过半数哨兵节点认为该主节点主观下线了,这样就客观下线了。

2.当主节点出现故障,此时哨兵节点会通过Raft算法(选举算法)实现选举机制共同选举出一个哨兵节点为leader,来负责处理主节点的故障转移和通知。所以整个运行哨兵的集群的数量不得少于3个节点

3.由leader哨兵节点执行故障转移,过程如下:
将某一个从节点升级为新的主节点,让其它从节点指向新的主节点;
若原主节点恢复也变成从节点,并指向新的主节点;
通知客户端主节点已经更换。

需要特别注意的是,客观下线是主节点才有的概念;如果从节点和哨兵节点发生故障,被哨兵主观下线后,不会再有后续的客观下线和故障转移操作。


主节点的选举

1.过滤掉不健康的(已下线的),没有回复哨兵 ping 响应的从节点。
2.选择配置文件中从节点优先级配置最高的。(replica-priority,默认值为100)
3.选择复制偏移量最大,也就是复制最完整的从节点。


哨兵的启动依赖于主从复制,所以须把主从复制部署好的情况下再去做哨兵模式

实现哨兵模式

修改配置文件(主从修改内容一致)

protected-mode no                                 17行,关闭保护模式
port 26379                                              21行,Redis哨兵默认的监听端口
daemonize yes                                       26行,指定sentinel为后台启动
logfile "/var/log/sentinel.log"                   36行,指定日志存放路径
dir "/var/lib/redis/6379"                           65行,指定数据库存放路径
sentinel monitor mymaster 192.168.94.7 6379 2    

84行,修改 指定该哨兵节点监控192.168.94.7:6379这个主节点,该主节点的名称是mymaster,最后的2的含义与主节点的故障判定有关:至少需要2个哨兵节点同意,才能判定主节点故障并进行故障转移


sentinel down-after-milliseconds mymaster 30000    113行,判定服务器down掉的时间周期,默认30000毫秒(30秒)
sentinel failover-timeout mymaster 180000        146行,故障节点的最大超时时间为180000(180秒)
vim /opt/redis-5.0.7/sentinel.conf

下面亮相皆为默认,默认即可

启动哨兵模式

注意:先启动主进程,再启动从进程

redis-sentinel sentinel &  启动哨兵

redis-cli -p 26379 info sentinel  查看哨兵的详细信息

测试

tailf /var/log/sentinel.log

将192.168.94.7恢复,并恢复成从

集群(Cluster)

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/793670.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

电脑硬件 -CPU

决定性能:CPU,内存,显卡,硬盘 保证性能:主板,电源,CPU散热器 英特尔:赛扬,奔腾,酷睿,至强(从低到高) 赛扬和奔腾&#…

电荷泵如何实现升压原来

电荷泵如何实现升压原来 某芯片自举栅极驱动内部原理图迪克森电荷泵 某芯片自举栅极驱动内部原理图 迪克森电荷泵 迪克森电荷泵(Dickson Charge Pump)是一种电压倍增器电路,可以将低电压升高到较高电压,相对于其他电压升压电路&a…

00-JAVA基础-反射机制

反射 什么是反射 在Java中,反射(Reflection)是Java语言的一个特性,它允许程序在运行时检查类、接口、字段和方法的信息。通过反射,Java代码能够动态地创建对象、调用方法、改变字段的值等,而无需在编译时…

【C++】每日一题 169 多数元素

给定一个大小为 n 的数组 nums &#xff0c;返回其中的多数元素。多数元素是指在数组中出现次数 大于 ⌊ n/2 ⌋ 的元素。 你可以假设数组是非空的&#xff0c;并且给定的数组总是存在多数元素。 #include <vector>class Solution { public:int majorityElement(std::v…

java常见的数据结构|面试以及常见问题

在数据结构相关的面试中&#xff0c;面试官可能会从理论基础、实际应用、算法实现及优化等方面提问。以下是一些数据结构面试常见问题及其简要说明&#xff1a; 基础概念与原理 数据结构三要素是什么&#xff1f; 存储结构&#xff08;物理结构&#xff09;&#xff1a;数据元素…

debian的使用笔记

1. XP风格任务栏 安装 debian-live-12.5.0-amd64-xfce.iso 后&#xff0c;把下面的任务栏删除&#xff0c;把上面的任务栏移到下面&#xff0c;然后设置如下选项 2. 命令自动补全 sudo apt install bash-completion 3. 找不到命令 sudo apt install command-not-found sudo…

爬虫学习第一天

爬虫-1 爬虫学习第一天1、什么是爬虫2、爬虫的工作原理3、爬虫核心4、爬虫的合法性5、爬虫框架6、爬虫的挑战7、难点8、反爬手段8.1、Robots协议8.2、检查 User-Agent8.3、ip限制8.4、SESSION访问限制8.5、验证码8.6、数据动态加载8.7、数据加密-使用加密算法 9、用python学习爬…

计算机组成结构2

概念 存储系统 解决成本-速度-容量之前的矛盾问题 寄存器–cache–内存–硬盘–外存储 局部性原理 时间局部&#xff1a;相邻的时间访问同一个数据空间局部&#xff1a;相邻的空间地址会被连续访问 cache cpu与主存之间&#xff0c;命中cache后就不需要访问主存&#xff0c;…

C++相关概念和易错语法(3)(类的声明和定义、空指针分析、this指针)

1.类的声明和定义 注意类的声明和定义分离的时候&#xff0c;在定义处要使用域作用限定符&#xff0c;否则函数声明链接时的定位不到函数的定义。 这些成员变量、函数的作用于这个类域&#xff0c;将功能集成在一起&#xff0c;这体现出封装的思想。 在区分类的定义和声明时&…

Vue3_2024_7天【回顾上篇watch常见的后两种场景】___续

Vue3中监听多条数据的两种使用 1.watch【使用上一章写法&#xff0c;监听两个属性&#xff0c;然后执行相应操作…】 2.watchEffect【相对于使用watch&#xff0c;watchEffect默认页面初始加载&#xff0c;有点类似加配置&#xff1a;立即执行 immediate】 代码&#xff1a; …

这个故事有点长 - 东方绿舟

这个故事有点长 - 东方绿舟 这个地方很大&#xff0c;游玩一天是没有问题。东方绿舟的1号门入口处&#xff0c;是一个人工瀑布&#xff0c;上边写着东方绿舟几个大字。远远看去&#xff0c;这个瀑布非常壮观&#xff0c;水的流淌让人感到凉爽&#xff0c;很适合在那里拍照打卡。…

使用注意力机制的 LSTM 彻底改变时间序列预测

目录 一、说明二、LSTM 和注意力机制简介三、为什么要将 LSTM 与时间序列注意力相结合&#xff1f;四、模型架构训练与评估 五、验证六、计算指标七、结论 一、说明 在时间序列预测领域&#xff0c;对更准确、更高效的模型的追求始终存在。深度学习的应用为该领域的重大进步铺…

喜讯 ChatGPT 3.5 免登录|免注册就可以使用了

https://chat.openai.com/ 直接访问openai 官网直接使用&#xff0c;当然还是要魔法的&#xff0c;不用再去用别人二次开发的&#xff0c;还有次数限制&#xff0c;还有开会员&#x1f605;才能用的。&#x1f600;试用啦一下&#xff0c;基本秒回答&#xff0c;能力也是在线的…

llama-factory简介

llamafactory是什么&#xff0c;能干什么 LLaMA-Factory 是一个易于使用的大规模语言模型&#xff08;Large Language Model, LLM&#xff09;微调框架&#xff0c;它支持多种模型&#xff0c;包括 LLaMA、BLOOM、Mistral、Baichuan、Qwen 和 ChatGLM 等。该框架旨在简化大型语…

【Python】无法将“pip”项识别为 cmdlet、函数、脚本文件或可运行程序的名称解决方案

【Python】无法将“pip”项识别为 cmdlet、函数、脚本文件或可运行程序的名称解决方案 大家好 我是寸铁&#x1f44a; 总结了一篇【Python】无法将“pip”项识别为 cmdlet、函数、脚本文件或可运行程序的名称解决方案✨ 喜欢的小伙伴可以点点关注 &#x1f49d; 前言 今天寸铁…

JSON的定义、基本使用二

<script>//定义jsonvar json{"name" : "张三","age" : "18岁","addr" : ["北京","上海","天津"]}//获取数据console.log(json.age)console.log(json.name)console.log(json.addr)</…

渗透测试练习题解析 5(CTF web)

1、[安洵杯 2019]easy_serialize_php 1 考点&#xff1a;PHP 反序列化逃逸 变量覆盖 【代码审计】 通过 GET 的方式获取参数 f 的值&#xff0c;传递给变量 function 定义一个过滤函数&#xff0c;过滤掉特定字符&#xff08;用空字符替换&#xff09; 下面的代码其实没什么用…

Go语言如何处理文件

1.文件的重要性 文件不过是硬盘中的数据,看起来好像没什么了不起,但实际上,文件能够让程序员管理配置、存储程序的状态乃至从底层操作系统中读取数据。 UNIX型操作系统的一个重要特征是,将一切都视为文件。这意味着在操作系统看来,从键盘到打印机的所有东西都可像文件那样…

多线程(31)StampedLock和ReadWriteLock

StampedLock 是 Java 8 引入的一种新的锁机制&#xff0c;位于 java.util.concurrent.locks 包下。它可以被认为是 ReadWriteLock 的一个改进版&#xff0c;提供了一种乐观的读锁策略&#xff0c;这种策略可以在某些场景下减少锁的竞争&#xff0c;从而提高性能。与 ReadWriteL…

【Java】jdk1.8 Java代理模式,Jdk动态代理讲解(非常详细,附带class文件)

&#x1f4dd;个人主页&#xff1a;哈__ 期待您的关注 一、什么是代理模式 想要学代理模式&#xff0c;我们就要先弄清一个概念“什么是代理”&#xff1f; 在我们的现实生活中&#xff0c;你或许不少听过关于代理的名词&#xff0c;如&#xff1a;代理商。那什么又叫做代理…