Redis7--基础篇3(持久化)

持久化介绍

在这里插入图片描述
官网地址:
https://redis.io/docs/manual/persistence

  • RDB(Redis DataBase)
  • AOF(Append Only File)
  • RDB + AOF
    在这里插入图片描述

RDB模式(Redis DataBase)

在这里插入图片描述
RDB 持久性以指定的时间间隔执行数据集的时间点快照。
实现类似照片记录效果的方式,就是把某一时刻的数据和状态以文件的形式写到磁盘上,也就是
快照。这样一来即使故障宕机,快照文件也不会丢失,数据的可靠性也就得到了保证。
这个快照文件就称为RDB文件(dump.rdb),其中,RDB就是Redis DataBase的缩写。

在指定的时间间隔内将内存中的数据集快照写入磁盘也就是行话讲的Snapshot内存快照,它恢复时再将硬盘快照文件直接读回到内存里。

redis.conf配置文件

  • 6.0.16版本以下
    在这里插入图片描述
    在这里插入图片描述

  • 6.2以及7.0版本
    在这里插入图片描述

开启备份

1.修改配置文件

在这里插入图片描述
5秒或2次

2. 定义dump文件保存路径

在这里插入图片描述

3. 定义dump文件名称

在这里插入图片描述

测试

在这里插入图片描述
在这里插入图片描述

恢复备份

1. 将备份文件移动到redis安装目录并启动服务

flushall、flushdb命令也会产生备份文件
物理恢复,服务、备份需要分机隔离,防止硬盘损坏后备份文件也丢失。

手动触发备份

redis提供了两个命令来生成RDB文件, savebgsave
在这里插入图片描述

save

会阻塞当前redis服务器,知道持久化工作完成,在执行save命令期间,redis不能处理其他命令,生产禁止使用

在这里插入图片描述

bgsave

在这里插入图片描述

redis会在后台异步进行快照操作,不阻塞,在进行快照同时还能响应客户端请求,该触发方式会fork一个子进程,由子进程复制持久化过程。
Redis会使用bgsave对当前内存中的所有数据做快照,这个操作是子进程在后台完成的,这就允许主进程同时可以修改数据。

在这里插入图片描述

劣势

在这里插入图片描述

在备份间隔期间redis意外down调的话,会丢失当前至最新一次快照的数据。
内存数据全量同步,如果数据量太大会造成占用大量I/O,影响服务器性能。
RDB依赖于主进程的fork,在更大的数据集中,这可能导致服务的请求的瞬间延迟,fork的时候内存中的数据被克隆了一份,需要考虑容量。

如何检修dump.rdb文件

在这里插入图片描述

触发RDB快照的情况

  • 配置文件中默认的快照配置
  • 执行save、bgsave命令
  • 执行flushdb、flushall命令,但是生成的dump.rdb文件是空的,没有意义。
  • 属性shutdown并且没有设置开启AOF持久化
  • 主从复制,主节点自动触发

禁用快照

  • 启动服务时输入相关参数

    redis -cli config set save ""
    
  • 修改配置文件
    在这里插入图片描述

RDB模式相关配置参数详解

  • save <seconds> <changes> 快照的频率

  • dbfilename 快照文件的名称

  • dir 快照文件的目录

  • stop-writes-on-bgsave-error
    默认yes
    如果配置成no,表示你不在乎数据不一致或者有其他的手段发现和控制这种不一致,那么在快照写入失败时,
    也能确保redis继续接受新的写请求
    在这里插入图片描述

  • rdbcompression
    在这里插入图片描述
    默认yes
    对于存储到磁盘中的快照,可以设置是否进行压缩存储。如果是的话,redis会采用LZF算法进行压缩。
    如果你不想消耗CPU来进行压缩的话,可以设置为关闭此功能

  • rdbchecksum
    在这里插入图片描述
    默认yes
    在存储快照后,还可以让redis使用CRC64算法来进行数据校验,但是这样做会增加大约10%的性能消耗,如果希望获取到最大的性能提升,可以关闭此功能

  • rdb-del-sync-files
    在这里插入图片描述
    在没有持久性的情况下删除复制中使用的RDB文件启用。默认情况下no,此选项是禁用的。

小总结

在这里插入图片描述


AOF模式(Append Only File)

介绍

以日志的形式来记录每个写操作,将Redis执行过的所有写指令记录下来(读操作不记录),只许追加文件但不可以改写文件,redis启动之初会读取该文件重新构建数据,换言之,redis重启的话就根据日志文件的内容将写指令从前到后执行一次以完成数据的恢复工作。
默认情况下,redis是没有开启AOF的,如果开启的话需要修改配置文件。

配置AOF开启、AOF备份文件路径、AOF备份文件名

AOF持久化工作流程
在这里插入图片描述

1-Client作为命令的来源,会有多个源头以及源源不断的请求命令。
2-在这些命令到达Redis Server 以后并不是直接写入AOF文件,会将其这些命令先放入AOF缓存中进行保存。这里的AOF缓冲区实际上是内存中的一片区域,存在的目的是当这些命令达到一定量以后再写入磁盘,避免频繁的磁盘IO操作。
3-AOF缓冲会根据AOF缓冲区同步文件的三种写回策略将命令写入磁盘上的AOF文件。
4-随着写入AOF内容的增加为避免文件膨胀,会根据规则进行命令的合并(又称AOF重写),从而起到AOF文件压缩的目的。
5-当Redis Server 服务器重启的时候会从AOF文件载入数据。

AOF缓冲区三种写回策略

在这里插入图片描述

  • always
    同步写回,每个写命令执行完立刻同步的将日志写回磁盘
  • everysec
    每秒写回,每个写命令执行完,只是先把日志写到AOF文件内存缓冲区,每隔一秒把缓冲区的内容写入磁盘
  • no
    操作系统控制的写回,每个写命令执行完,只是先把日志写到AOF文件

在这里插入图片描述

AOF文件路径

redis6

AOF文件与RDB文件的位置一样,在此配置
在这里插入图片描述

redis7

在这里插入图片描述
在这里插入图片描述
最终保存路径为 dir+appenddirname

AOF文件名称

redis6

有且只有一个

在这里插入图片描述

redis7

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

恢复

正常恢复

  • 配置文件中 appendonly no 改为 appendonly yes
  • 重启服务

异常恢复

  • 重启服务会进入AOF文件的载入,如果AOF文件有问题,则无法启动
  • 异常修复命令:redis -check -aof --fix

优势

可紧急恢复、性能高、数据更不易丢失

劣势

对于相同的数据集来说,AOF文件要远大于RDB文件,恢复速度慢于RDB
AOF运行效率要慢于RDB,每秒同步策略较好

AOF重写机制

介绍

由于AOF持久化是Redis不断将写命令记录到 AOF 文件中,随着Redis不断的进行,AOF 的文件会越来越大,文件越大,占用服务器内存越大以及 AOF 恢复要求时间越长。为了解决这个问题,Redis新增了重写机制,当AOF文件的大小超过所设定的峰值时,Redis就会自动启动AOF文件的内容压缩,只保留可以恢复数据的最小指令集,或者可以手动使用命令 bgrewriteaof 来重新。

触发机制

在这里插入图片描述
注意 ,同时满足,且的关系才会触发。
1 根据上次重写后的aof大小,判断当前aof大小是不是增长了1倍
2 重写时满足的文件大小
3 满足配置文件中的配置项后,Redis会记录上次重写的AOF文件大小,默认配置是当AOF文件大小是上次write后大小的一倍且文件大于64MB时
4 可以执行bgrewriteof命令

总结

AOF文件重写并不是对原文件进行重新整理,而是直接读取服务器现有的键值对,然后用一条命令去代替之前记录这个键值对的多条命令,生成一个新的文件后去替换原来的AOF文件。

原理

1:在重写开始前,redis会创建一个“重写子进程”,这个子进程会读取现有的AOF文件,并将其包含的指令进行分析压缩并写入到一个临时文件中。
2:与此同时,主进程会将新接收到的写指令一边累积到内存缓冲区中,一边继续写入到原有的AOF文件中,这样做是保证原有的AOF文件的可用性,避免在重写过程中出现意外。
3:当“重写子进程”完成重写工作后,它会给父进程发一个信号,父进程收到信号后就会将内存中缓存的写指令追加到新AOF文件中
4:当追加结束后,redis就会用新AOF文件来代替旧AOF文件,之后再有新的写指令,就都会追加到新的AOF文件中
5:重写aof文件的操作,并没有读取旧的aof文件,而是将整个内存中的数据库内容用命令的方式重写了一个新的aof文件,这点和快照有点类似

配置项详细说明

在这里插入图片描述

小总结

在这里插入图片描述


RDB-AOF混合持久化模式

在同时开启RDB和AOF持久化时,重启只会加载AOF文件,不会加载RDB文件。
在这里插入图片描述

RDB+AOF混合方式
结合了RDB和AOF的优点,既能快速加载又能避免丢失过多的数据

开启混合方式设置

设置aof-use-rdb-preamble的值为 yes yes表示开启,设置为no表示禁用

先使用RDB进行快照存储,然后使用AOF持久化记录所有的写操作,当重写策略满足或手动触发重写的时候,将最新的数据存储为新的RDB记录。这样的话,重启服务的时候会从RDB和AOF两部分恢复数据,既保证了数据完整性,又提高了恢复数据的性能。简单来说:混合持久化方式产生的文件一部分是RDB格式,一部分是AOF格式。----》AOF包括了RDB头部+AOF混写
在这里插入图片描述


纯缓存模式

同时关闭RDB模式和AOF模式,但仍可以使用save、bgsave命令来生成rdb文件,用bgrewriteaof命令来生成aof文件。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/160263.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

计算机组成原理(万字爆肝整理)

第一章 计算机系统概述 “较简单&#xff0c;不做过多赘述&#xff0c;后面会详细学到” 第一节 计算机系统层次结构 1.计算机系统的基本组成&#xff1a;硬件软件 2.计算机硬件的基本组成&#xff1a;运算器存储器控制器输入设备输出设备 3.系统软件和应用软件 系统软件…

Cypress环境变量

Cypress环境变量 baseUrl 当你配置了 baseUrl &#xff0c;测试套件中的 cy.visit() 、 cy.request() 都会自动以 baseUrl 的值作为前缀并且&#xff0c;当你需要访问某些网址或者发起接口请求时&#xff0c;在代码中就可以不用再指定请求的 host 或者 url 了 如何配置 base…

Java进阶——多线程相关,实际应用中的积累,持续更新

目录 多线程相关CountDownLatch赛跑的案例countDownLatch.await(300, TimeUnit.SECONDS); Java其他进阶Map的put方法只放一个元素的集合 多线程相关 CountDownLatch 案例&#xff1a;主线程的执行需要等待子线程执行完&#xff0c;等各个线程执行完毕后&#xff0c;主线程做收…

redis的高可用(主从复制和哨兵模式)

redis的高可用&#xff08;主从复制和哨兵模式&#xff09; redis的性能管理&#xff1a;redis的数据缓存在内存当中 INFO memory&#xff1a;查看redis内存使用情况 used_memory:1800800&#xff1a;redis中数据占用的内存 used_memory_rss:5783552&#xff1a;redis向操作…

Halcon Solution Guide I basics(3): Region Of Interest(有兴趣区域/找重点)

文章目录 文章专栏前言文章解读前言创建ROI案例1&#xff1a;直接截取ROI手动截取ROI 总结ROI套路获取窗口句柄截取ROI区域获取有效区域 Stop组合 文章专栏 Halcon开发 Halcon学习 练习项目gitee仓库 CSDN Major 博主Halcon文章推荐 前言 今天来看第三章内容&#xff0c;既然是…

QTableWidget——编辑单元格

文章目录 前言熟悉QTableWiget&#xff0c;通过实现单元格的合并、拆分、通过编辑界面实现表格内容及属性的配置、实现表格的粘贴复制功能熟悉QTableWiget的属性 一、[单元格的合并、拆分](https://blog.csdn.net/qq_15672897/article/details/134476530?spm1001.2014.3001.55…

docker、elasticsearch8、springboot3集成备忘

目录 一、背景 二、安装docker 三、下载安装elasticsearch 四、下载安装elasticsearch-head 五、springboot集成elasticsearch 一、背景 前两年研究了一段时间elasticsearch&#xff0c;当时也是网上找了很多资料&#xff0c;最后解决个各种问题可以在springboot上运行了…

Godot

前言 为什么要研究开源引擎 主要原因有&#xff1a; 可以享受“信创”政策的红利&#xff0c;非常有利于承接政府项目。中美脱钩背景下&#xff0c;国家提出了“信创”政策。这个政策的核心就是&#xff0c;核心技术上自主可控。涉及的产业包括&#xff1a;芯片、操作系统、数据…

【Django使用】md文档10大模块第5期:Django数据库增删改查和Django视图

Django的主要目的是简便、快速的开发数据库驱动的网站。它强调代码复用&#xff0c;多个组件可以很方便的以"插件"形式服务于整个框架&#xff0c;Django有许多功能强大的第三方插件&#xff0c;你甚至可以很方便的开发出自己的工具包。这使得Django具有很强的可扩展…

Vue项目 配置项设置

一、项目运行时浏览器自动打开 找到package.json文件 找到"sctipts"配置项 在"serve"配置项最后加上--open "scripts": {"serve": "vue-cli-service serve --open","build": "vue-cli-service build&quo…

Redis面试内容,Redis过期策略,Redis持久化方式,缓存穿透、缓存击穿和缓存雪崩,以及解决办法

文章目录 一、redis什么是RedisRedis使用场景1、缓存2、数据共享[分布式](https://so.csdn.net/so/search?q分布式&spm1001.2101.3001.7020)3、分布式锁4、全局ID5、计数器6、限流7、位统计 Redis有5中数据类型&#xff1a; SSHLZRedis中一个key的值每天12点过期&#xff…

Cookie、Session、CBV加装饰器的三种方法

【0】cookie、session和Token的发展史 【1】Cookie的形式 存储形式&#xff1a;k&#xff1a;v键值对存储位置&#xff1a;客户端缺点&#xff1a;不安全&#xff0c;信息可能会泄露 【2】session的形式 标识符&#xff0c;表示我是当前用户加密出来的数据对敏感信息进行加密…

排序算法-----快速排序(非递归实现)

目录 前言 快速排序 基本思路 非递归代码实现 前言 很久没跟新数据结构与算法这一栏了&#xff0c;因为数据结构与算法基本上都发布完了&#xff0c;哈哈&#xff0c;那今天我就把前面排序算法那一块的快速排序完善一下&#xff0c;前面只发布了快速排序递归算法&#xff0c;…

单链表相关面试题--3.链表的中间节点

3.链表的中间节点 876. 链表的中间结点 - 力扣&#xff08;LeetCode&#xff09; /* 解题思路&#xff1a; 通过快慢指针找到中间节点&#xff0c;快指针每次走两步&#xff0c;慢指针每次走一步&#xff0c;当快指针走到结尾的时候&#xff0c;慢指针正好走到中间位置 */ typ…

HTTPS协议的加密流程

目录 一&#xff0c;HTTPS是什么 二&#xff0c;两种加密方式 三&#xff0c;HTTPS的加密过程 3.1 引入对称加密 3.2 引入非对称加密 3.3 引入证书 一&#xff0c;HTTPS是什么 HTTPS也是一个应用层协议&#xff0c;它是在HTTP协议的基础上引入了一个加密层。因为HTTP协议…

51单片机按键控制LED灯亮灭的N个玩法

51单片机按键控制LED灯亮灭的N个玩法 1.概述 这篇文章介绍按键的使用&#xff0c;以及通过控制LED灯的小实验&#xff0c;发现按键中存在的问题&#xff0c;然后思考并解决这些问题。达到熟练使用按键控制元器件。 2.搭建硬件环境 1.硬件准备 名称型号数量单片机STC12C205…

Sleuth

Sleuth 一 引言 随着服务的越来越多&#xff0c;对调⽤链的分析会越来越复杂。它们之间的调⽤关系也许如下图&#xff1a; 问题&#xff1a; 1&#xff1a;微服务之间的调⽤错综复杂&#xff0c;⽤户发送的请求经历那些服务&#xff0c;调⽤链不清楚&#xff0c;没有⼀ 个⾃…

【SpringCloud微服务全家桶学习笔记-Hystrix(服务降级,熔断,接近实时的监控,服务限流等)】

服务雪崩 &#xff08;微服务面临的问题&#xff09; 多个微服务之间调用的时候&#xff0c;假设微服务A调用微服务B和微服务C&#xff0c;微服务B和微服务C又调用其它的微服务&#xff0c;这就是所谓的“扇出”。如果扇出的链路上某个微服务的调用响应时间过长或者不可用&…

sqlserver==索引解析,执行计划,索引大小

1创建测试表 -- 创建大型表 CREATE TABLE LargeTableWithIndex (ID int IDENTITY(1,1) PRIMARY KEY,IndexedColumn int,NonIndexedColumn nvarchar(255),OtherData nvarchar(255) );2插入测试数据 -- 使用 T-SQL 插入大量数据 DECLARE @i int = 1; WHILE @i <= 100000 -- …

Mac中LaTex无法编译的问题

最近在使用TexStudio时&#xff0c;遇到一个棘手的问题&#xff1a; 无法编译&#xff0c;提示如下&#xff1a; kpathsea: Running mktexfmt xelatex.fmt /Library/TeX/texbin/mktexfmt: kpsewhich -var-valueTEXMFROOT failed, aborting early. BEGIN failed–compilation a…