5 面试题--redis

伪客户端:

伪客户端的 fd 属性值为 -1;伪客户端处理的命令请求来源于 AOF ⽂件或者 Lua 脚本,⽽不是⽹络,所以这种客户端不需要套接字连接,⾃然也不需要记录套接字描述符。⽬前 Redis 服务器会在两个地⽅ ⽤到伪客户端,⼀个⽤于载⼊ AOF ⽂件并还原数据库状态(载⼊完成则退出),⽽另⼀个则⽤于执⾏ Lua 脚本中包含的 Redis 命令(随服务器⼀直存在)。

不修改数据库的命令也可能写⼊ AOF ⽂件:

PUBSUB 命令虽然没有修改数据库,但该命令向频道的所有订阅者发送消息这⼀⾏为带有副作⽤,接收到消息的所有客户端的状态都会因为这个命令⽽改变。因此,服务器需要使⽤ REDIS_FORCE_AOF 标志,强制将这个命令写⼊ AOF ⽂件,这样在将来载⼊ AOF ⽂件时,服务器就可以再次执⾏相同的。

服务器使⽤两种模式来限制客户端输出缓冲区的⼤⼩:

硬性限制:如果输出缓冲区的⼤⼩超过了硬性限制所设置的⼤⼩,那么服务器⽴即关闭客户端。
软性限制:如果输出缓冲区的⼤⼩超过了软性限制所设置的⼤⼩,但还没超过硬性限制,那么服务器会继续监视客户端,如果输出缓冲区的⼤⼩⼀直超出软性限制,并且持续时间超过服务器设定的时⻓,那么服务器将关闭客户端;相反地,如果输出缓冲区的⼤⼩在指定时间之内,不再超出软性限制,那么客户端就不会被关闭。

服务器从启动到可处理客户端的命令请求需要执⾏步骤:

1. 初始化服务器状态
2. 载⼊服务器配置(包含⽤户⾃定义配置)
3. 初始化服务器数据结构
4. 还原数据库状态
5. 执⾏事件循环

复制

在 Redis 中,⽤户可以通过执⾏ SLAVEOF 命令,让⼀个服务器去复制另⼀个服务器,称呼被复制的服务器为主服务器,⽽对主服务器进⾏复制的服务器则被称为从服务器。复制的功能分为 同步(主从⼀致)和 命令传播(主服务器修改后从服务器更新⾄⼀致)两个操作。

复制步骤:

1. 从服务器向主服务器发送 PSYNC 命令;
2. 然后主服务器执⾏ BGSAVE 命令,在后台⽣成⼀个 RDB ⽂件,之后使⽤⼀个缓冲区记录从现在开始执⾏的所有写命令;
3. 当主服务器的 BGSAVE 命令执⾏完成后,主服务器会将 BGSAVE 命令⽣成的 RDB ⽂件发送给从服务器,从服务器接收并载⼊这个 RDB ⽂件,将⾃⼰的数据库状态更新⾄主服务器执⾏ BGSAVE 命令时的数据库状态;
4. 主服务器将记录在缓冲区⾥⾯的所有写命令发送给从服务器,从服务器执⾏这些写命令,将⾃⼰的数据库状态更新⾄主服务器数据库当前所处的状态。
5. 当上述同步完成后,将使⽤下图流程(命令传播阶段)。当主服务器接收到新的写命令时,将向所有的从服务器发送写命令并存⼊固定⻓度的复制积压缓冲区,同时主从服务器各⾃维护复制偏移量 (可根据偏移量来判断是否主从⼀致)。若某从服务器断线重连后,可通过 PSYNC 命令向主服务器发送⾃⼰的复制偏移量,主服务器会根据该复制偏移量决定如何对该从服务器执⾏同步。若复制偏移量之后的数据仍在复制积压缓冲区内,则将之后的写命令发送给该从服务器进⾏同步;否则,将对该从服务器执⾏上述 4 个步骤重新同步。

        

⼼跳检测:

        

1. 主从服务器可以通过发送和接收⼼跳检测命令来检测两者之间的 ⽹络连接是否正常;
2. 辅助实现 min_slaves 配置选项,防⽌主服务器在不安全的情况下执⾏写命令;
3. 通过复制偏移量检测命令是否丢失。主服务器收到命令,若之前的写命令在半路丢失,可以检查到从服务器当前的复制偏移量少于⾃⼰的复制偏移量,从⽽重新发送从服务器缺少的数据给从服务
器。

Sentinel(哨兵)

Sentinel 是 Redis 的⾼可⽤性解决⽅案:由⼀个或多个 Sentinel 实例组成的 Sentinel 系统可以监视任意多个主服务器,以及这些主服务器属下的所有从服务器,并在被监视的主服务器进⼊下线状态时,⾃动将下线主服务器属下的某个从服务器升级为新的主服务器,然后由新的主服务器代替已下线的主服务器继续处理命令请求。

Sentinel 启动需要执⾏的步骤:

1. 初始化服务器。本质是 Redis 普通服务器,但是不加载 RDB ⽂件等。
2. 将普通 Redis 服务器使⽤的代码替换成 Sentinel 专⽤代码。即加载不同于普通服务器的命令表
3. 初始化 Sentinel 状态。根据给定的配置⽂件,初始化 Sentinel 的监视主服务器列表等
4. 创建连向主服务器的⽹络连接。对于每个被 Sentinel 监视的主服务器来说,Sentinel 会创建两个连向主服务器的异步⽹络连接:⼀个是命令连接,这个连接专⻔⽤于向主服务器发送命令,并接收命令回复。另⼀个是订阅连接(解决客户端不在线或断线之后⽆法接收消息的问题,因为被发送的消息都不会保存在 Redis 服务器⾥),这个连接是专⻔⽤于订阅主服务器的频道。
Sentinel 监视某服务器,同时也可感知到监视该服务器的其他 Sentinel 并做相应更新,对其建⽴命令连接但不建⽴订阅连接,这是因为 Sentinel 需要通过接收主服务器或者从服务器发来的频道信息来发现未 知的新 Sentinel,所以才需要建⽴订阅连接,⽽相互已知的 Sentinel 只要使⽤命令连接来进⾏通信就⾜ 够了。

检测主观下线状态:

默认情况下,Sentinel 会以每秒⼀次的频率向所有与它创建了命令连接的实例(包括主从服务器、其他Sentinel 在内)发送 PING 命令,并通过实例返回的 PING 命令回复来判断实例是否在线,若在指定时间内连续返回⽆效回复则判断下线。注意每个 Sentinel 指定的时间可能是不⼀样的。
检测客观下线状态:当 Sentinel 将⼀个主服务器判断为主观下线之后,为了确认这个主服务器是否真的下线了,它会向同样监视这⼀主服务器的其他 Sentinel 进⾏询问,看它们是否也认为主服务器已经进⼊了下线状态(可以是主观下线或者客观下线)。当 Sentinel 从其他 Sentinel 那⾥接受到⾜够数量的已下线判断后,Sentinel 就会将该服务器判断为客观下线,并对主服务器执⾏故障转移操作。
选举领头 Sentinel:
当⼀个主服务器被判断为客观下线时,监视这个下线主服务器的各个 Sentinel 会进⾏协商,选举出⼀个领头 Sentinel,并由领头 Sentinel 对下线主服务器执⾏故障转移操作。协商规则如下:
1. 监视该客观下线的每个 Sentinel 会互相向其他 Sentinel 发送消息,⽽⾃身把接收到的发送第⼀个消息的那个 Sentinel 设置为⾃⼰的领头,并拒绝后续的所有该消息;
2. 统计⾃身是多少 Sentinel 的领头,当超过半数时将成为真正的领头 Sentinel,并执⾏故障转移操作;
3. 若在给定时限内都不满⾜,则在⼀段时间之后再次选举,直到选出领头 Sentinel 为⽌。

故障转移:

领头 Sentinel 将对已下线的主服务器执⾏故障转移操作:
1. 在已下线的主服务器属下的所有从服务器⾥⾯,挑选出⼀个从服务器,并将其转为主服务器。⾸先排除不在线的从服务器,其次排除最近没有成功通信过的从服务器,然后根据配置去除数据⽐较旧的从服务器,最后按优先级、复制偏移量、运⾏ID 排序后选择⼀个从服务器。
2. 让已下线的主服务器属下的所有从服务器改为复制新的主服务器;
3. 将已下线主服务器设置为新的主服务器的从服务器,当这个旧的主服务器重新上线时,它就会成为新的主服务器的从服务器;

集群

集群是 Redis 提供的分布式数据库⽅案,通过分⽚来进⾏数据共享,并提供复制和故障转移功能。
Redis 集群通过 分⽚ 的⽅式来保存数据库中的键值对:集群的整个数据库被分为 16384 个槽
(slot),数据库中的每个键都属于这 16384 个槽的其中⼀个,集群中的每个节点可以处理 0 个或最多 16384 个槽。当数据库中的 16384 个槽都有节点在处理时,集群处于上线状态;相反,有任何⼀个槽没有得到处理,那么集群处于下线状态。(集群中的每个节点都会记录⾃⼰负责处理的槽以及所有其他节点处理的槽)
⼀个集群客户端通常会与集群中的多个节点创建套接字连接,⽽所谓的节点转向实际上就是换⼀个套接字来发送命令。如果客户端尚未与想要转向的节点创建套接字连接,那么客户端会先根据 MOVED 错误提供的 IP 地址和端⼝号来转向连接节点,然后再重试。、
重新分⽚:
Redis 集群的重新分⽚操作可以将任意数量已经指派给某个节点的槽改为指派给另⼀个节点,并且相关 槽所属的键值对也会从源节点被移动到⽬标节点。重新分⽚操作可以在线进⾏,在重新分⽚的过程中,集群不需要下线,并且源节点和⽬标节点都可以继续处理命令请求。
ASK 错误和 MOVED 错误都会导致客户端转向,区别在于:
1. MOVED 错误代表槽的负责权已经从⼀个节点转移到了另⼀个节点:在客户端收到关于槽 i 的
MOVED 错误之后,客户端每次遇到关于槽 i 的命令请求时,都可以直接将命令请求发送⾄
MOVED 错误所指向的节点,因为该节点就是⽬前负责槽的节点;
2. ASK 错误只是两个节点在迁移槽的过程中使⽤的⼀种临时措施:在客户端收到关于槽 i 的 ASK 错误之后,客户端只会在接下来的⼀次命令请求中将关于槽 i 的命令请求发送⾄ ASK 错误所指示的节点,但这种转向不会对客户端今后发送关于槽 i 的命令请求产⽣任何影响,客户端仍然会将关于槽 的命令请求发送⾄⽬前负责处理槽 i 的节点,除⾮ ASK 错误再次出现。

6.5 事务

Redis 通过 MULTI(切换为事务状态)、EXEC(执⾏事务队列)、WATCH(乐观锁) 等命令来实现事务功能。事务提供了⼀种将多个命令请求打包,然后⼀次性、按顺序地执⾏多个命令的机制,并且在事务执⾏期间,服务器不会中断事务⽽改去执⾏其他客户端的命令请求,它会将事务中的所有命令都执⾏完毕,然后才去处理其他客户端的命令请求。
WATCH 可以在 EXEC 命令执⾏之前,监视任意数量的数据库键,并在 EXEC 命令执⾏时,检测被监视的键是否⾄少有⼀个已经被修改过了,如果是的话,服务器将拒绝执⾏事务,并向客户端返回代表事 务执⾏失败的空回复。
原⼦性:
Redis 的事务和传统的关系型数据库事务的最⼤区别在于,Redis 不⽀持事务回滚机制,即使事务队列中的某个命令在执⾏期间出现了错误,整个事务也会继续执⾏下去,直到将事务队列中的所有命令都执⾏完毕为⽌。
⼀致性:
1. 处理⼊队错误:如果⼀个事务在⼊队命令的过程中,出现了命令不存在或者命令的格式不正确等情况,那么 Redis 将拒绝执⾏这个事务,所以 Redis 事务的⼀致性不会被带有⼊队错误的事务影
响。
2. 执⾏错误:执⾏过程中发⽣的错误都是⼀些不能在⼊队时被服务器发现的错误,这些错误只会在命令实际执⾏时被触发。即使在事务的执⾏过程中发⽣了错误,服务器也不会中断事务的执⾏,它会继续执⾏事务中余下的其他命令,并且已执⾏的命令(包括执⾏命令所产⽣的结果)不会被出错的命令影响,因此不会对事务的⼀致性产⽣任何影响。对数据库键执⾏了错误类型的操作是事务执⾏期间最常⻅的错误之⼀。
3. 服务器停机:⽆论服务器是有持久化(加载 AOF 或 RDB ⽂件)还是⽆持久化(空⽩数据库),都将保持数据的⼀致性。
隔离性:因为 Redis 使⽤单线程的⽅式来执⾏事务(以及事务队列中的命令),并且服务器保证,在执⾏事务期间不会对事务进⾏中断,因此,Redis 的事务总是以串⾏的⽅式运⾏的,并且事务也总是具有隔离性。
持久性:因为 Redis 的事务不过是简单地⽤队列包裹了⼀组 Redis 命令,并没有为事务提供任何额外的持久化功能,所以 Redis 事务的持久性由 Redis 所使⽤的持久化模型决定:
1. 当服务器在 ⽆持久化的内存模式 下运⾏时,事务 不具持久性;
2. 当服务器在 RDB 持久化模式 下运⾏时,服务器只会在特定的保存条件被满⾜时,才会执⾏
BGSAVE 命令对数据库进⾏保存操作,并且异步执⾏的 BGSAVE 不能保证事务数据被第⼀时间保
存到硬盘,因此不具持久性;
3. 当服务器在 AOF 持久化模式 下,并且 appendfsync 选项的值为 always 时,程序总会在执⾏命
令之后调⽤同步函数,将命令数据真正保存到硬盘,具有持久性;
4. 当服务器在 AOF 持久化模式 下,并且 appendfsync 选项的值为 everysec 时,程序会每秒同步
⼀次命令数据到硬盘。因为停机可能会恰好发送在等待同步的那⼀秒内,这可能会造成数据丢失,
不具有持久性;
5. 当服务器在 AOF 持久化模式 下,并且 appendfsync 选项的值为 no 时,程序会交由操作系统来
决定何时将命令数据同步到硬盘,该情况下事务 不具有持久性。
不论 Redis 在什么模式下运⾏,在⼀个事务的最后加上 SAVE 命令总可以保证事务的 持久性。但是资源消耗⼤。

6.6 缓存管理

缓存穿透

缓存穿透是指缓存和数据库中都没有的数据,⽽⽤户不断发起请求;
解决⽅案:
接⼝层增加校验,如⽤户鉴权校验,id做基础校验,id<=0的直接拦截
设置空缓存:将key-value对写为key-null,缓存有效时间可以设置短点,这样可以防⽌攻击⽤户反复⽤同⼀个id暴⼒攻击。

缓存击穿

缓存击穿是指缓存没有但数据库有的数据(⼀般是缓存时间到期),这时由于并发⽤户特别多,引起数据库压⼒瞬间增⼤;
解决⽅法:
分布式互斥锁:只允许⼀个线程重建缓存,其他线程等待重建缓存的线程执⾏完,重新从缓存获取数据即可。
永不过期:为每个键值对设置⼀个逻辑过期时间,当发现超过逻辑过期时间后,会使⽤单独的线程去更新缓存

缓存雪崩

缓存雪崩是指缓存中数据⼤批量到过期时间,⽽查询数据量巨⼤,引起数据库压⼒过⼤甚⾄宕机。和缓存击穿不同的是,缓存击穿指并发查同⼀条数据,缓存雪崩是不同数据都过期了,很多数据都查不到从⽽查数据库。
解决⽅案:
设置过期时间随机,防⽌同⼀时间⼤量数据过期现象发⽣。
如果缓存数据是分布式部署,将热点数据均匀的分布在不同的缓存数据库中。
设置热点数据永不过期

6.7 ⾼并发系统设计

有限资源⾯对⼤量请求,如何解决资源的请求
降低流量:⽐如前端返回⼀些伪消息(可以轻松判断的)
⽤户请求过来时放⼊消息队列中处理

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/183317.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

ThermalLabel SDK for .NET 13.0.23.1113 Crack

ThermalLabel SDK for .NET 是一个 .NET 典型类库&#xff0c;它允许用户和开发人员创建非常创新的条码标签并将其发布在 zebra ZPL、EPL、EPSON ESC、POS 以及 Honeywell intermec 指纹中通过在 VB.NET 或 C# 上编写 .NET 纯代码来实现热敏打印机&#xff0c;以实现项目框架的…

Ubuntu Linux玩童年小霸王插卡游戏

1.下载安装模拟器 在Windows平台模拟器非常多&#xff0c;而且效果也很优秀&#xff0c;Linux平台的用户常常很羡慕&#xff0c;却因为系统的缘故&#xff0c;无法使用这样的模拟器&#xff0c;但是随着时代的发展&#xff0c;Linux平台也出现了许多优秀的模拟器&#xff0c;现…

navigator.clipboard is undefined in JavaScript issue [Fixed]

navigator.clipboard 在不安全的网站是无法访问的。 在本地开发使用localhost或127.0.0.1没有这个问题。因为它不是不安全网站。 在现实开发中&#xff0c;可能遇到测试环境为不安全网站。 遇到这个问题&#xff0c;就需要将不安全网站标记为非不安全网站即可。 外网提供了3…

【HTML】VScode不打开浏览器实时预览html

1. 问题描述 预览HTML时&#xff0c;不想打开浏览器&#xff0c;想在VScode中直接实时预览 2. 解决方案 下载Microsoft官方的Live Preview 点击预览按钮即可预览

Unity中Shader优化通用规则

文章目录 前言一、精度优化1、三种精度 fixed / half / float2、位置坐标、物理坐标类使用float3、HDR颜色、方向向量类使用half4、普通纹理、颜色类使用 fixed5、实际上&#xff0c;使用的精度取决于 平台 和 GPU6、现在桌面级GPU都是直接采用 float , Shader中的 fixed / hal…

J2EE征程——第一个纯servletCURD

第一个纯servletCURD 前言在此之前 一&#xff0c;概述二、CURD1介绍2查询并列表显示准备实体类country编写 CountryListServlet配置web.xml为web应用导入mysql-jdbc的jar包 3增加准备增加的页面addc.html编写 CAddServlet配置web.xml测试 4删除修改CountryListServlet&#xf…

RabbitMQ消息模型之Routing-Topic

Routing Topic Topic类型的Exchange与Direct相比&#xff0c;都是可以根据RoutingKey把消息路由到不同的队列。只不过Topic类型Exchange可以让队列在绑定Routing key的时候使用通配符&#xff01;这种模型Routingkey一般都是由一个或多个单词组成&#xff0c;多个单词之间以”…

ESP32-Web-Server编程- WebSocket 编程

ESP32-Web-Server编程- WebSocket 编程 概述 在前述 ESP32-Web-Server 实战编程-通过网页控制设备的 GPIO 中&#xff0c;我们创建了一个基于 HTTP 协议的 ESP32 Web 服务器&#xff0c;每当浏览器向 Web 服务器发送请求&#xff0c;我们将 HTML/CSS 文件提供给浏览器。 使用…

智能手表上的音频(四):语音通话

上篇讲了智能手表上音频文件播放。本篇开始讲语音通话。同音频播放一样有两种case&#xff1a;内置codec和BT。先看这两种case下audio data path&#xff0c;分别如下图&#xff1a; 内置codec下的语音通话audio data path 蓝牙下的语音通话audio data path 从上面两张图可以看…

纯js实现录屏并保存视频到本地的尝试

前言&#xff1a;先了解下&#xff1a;navigator.mediaDevices&#xff0c;mediaDevices 是 Navigator 只读属性&#xff0c;返回一个 MediaDevices 对象&#xff0c;该对象可提供对相机和麦克风等媒体输入设备的连接访问&#xff0c;也包括屏幕共享。 const media navigator…

【刷题】DFS

DFS 递归&#xff1a; 1.判断是否失败终止 2.判断是否成功终止&#xff0c;如果成功的&#xff0c;记录一个成果 3.遍历各种选择&#xff0c;在这部分可以进行剪枝 4.在每种情况下进行DFS&#xff0c;并进行回退。 199. 二叉树的右视图 给定一个二叉树的 根节点 root&#x…

深度学习之十二(图像翻译AI算法--UNIT(Unified Neural Translation))

概念 UNIT(Unified Neural Translation)是一种用于图像翻译的 AI 模型。它是一种基于生成对抗网络(GAN)的框架,用于将图像从一个域转换到另一个域。在图像翻译中,这意味着将一个风格或内容的图像转换为另一个风格或内容的图像,而不改变图像的内容或语义。 UNIT 的核心…

IDEA2022 Git 回滚及回滚内容恢复

IDEA2022 Git 回滚 ①选择要回滚的地方&#xff0c;右键选择 ②选择要回滚的模式 ③开始回滚 ④soft模式回滚的内容会保留在暂存区 ⑤输入git push -f &#xff0c;然后重新提交&#xff0c;即可同步远程 注意观察IDEA右下角分支的标记&#xff0c;蓝色代表远程内容未同步到本…

数据结构 / day06 作业

1.下面的代码打印在屏幕上的值是多少? /下面的代码打印在屏幕上的值是多少?#include "stdio.h"int compute_data(int arr[], unsigned int len) {long long int result 0;if(result len)return arr[0];resultcompute_data(arr,--len);printf("len%d, res…

elementui中table进行表单验证

<el-form :model"ruleForm" ref"ruleForm" class"demo-ruleForm"><el-table :data"ruleForm.tableDataShou" border style"width: 100%;"><el-table-column type"index" label"序号" wi…

【23种设计模式·全精解析 | 自定义Spring框架篇】Spring核心源码分析+自定义Spring的IOC功能,依赖注入功能

文章目录 ⭐⭐⭐Spring核心源码分析自定义Spring框架⭐⭐⭐一、Spring使用回顾二、Spring核心功能结构1、Spring核心功能2、bean概述 三、Spring IOC相关接口分析1、BeanFactory解析2、BeanDefinition解析3、BeanDefinitionReader解析4、BeanDefinitionRegistry解析5、创建容器…

伪集群配置

编辑core-site 配置core-site 配置hdfs-site 将以下的文件配置进去 启动一下hadoop产生tmp文件 产生这个叫namenode的文件并格式化 回到~目录 再配置以下信息 配置以下信息 重启文件 再重新格式化配置namenode 再启动一下&#xff0c;然后jps看看&#xff0c;出现这样就…

java后端自学总结

自学总结 MessageSource国际化接口总结 MessageSource国际化接口 今天第一次使用MessageSource接口,比较意外遇到了一些坑 messageSource是spring中的转换消息接口&#xff0c;提供了国际化信息的能力。MessageSource用于解析 消息&#xff0c;并支持消息的参数化和国际化。 S…

运维知识点-openResty

openResty 企业级实战——畅购商城SpringCloud-网站首页高可用解决方案-openRestynginxlua——实现广告缓存测试企业级实战——畅购商城SpringCloud-网站首页高可用解决方案-openRestynginxlua——OpenResty 企业级实战——畅购商城SpringCloud-网站首页高可用解决方案-openRes…

优化器原理——权重衰减(weight_decay)

优化器原理——权重衰减&#xff08;weight_decay&#xff09; weight_decay的作用 原理解析 实验观察 在深度学习中&#xff0c;优化器的 weight_decay 参数扮演着至关重要的角色。它主要用于实现正则化&#xff0c;以防止模型过拟合。过拟合是指模型在训练数据上表现优异&…