2、redis的持久化

redis的持久化

在redist当中,高可用的技术包括持久化,主从复制,哨兵模式,集群。

持久化是最简单的高可用的方法,作用就是备份数据。即将数据保存到硬盘,防止进程退出导致数据丢失。

redis持久化方式:

1、RDB持久化:人工或者定时的把内存当中的数据保存到硬盘,这是一种冷备份的方式(备份的时候不用关闭服务,恢复的时候需要关闭),默认的持久化方式。

2、AOF持久化:类似于mysql的二进制日志,把所有redis的操作记录在二进制日志当中,恢复的时候从二进制的内容进行恢复。全热备份,服务要重启。

AOF的持久化的实时性更好,进程意外丢失,恢复的数据是最多的,AOF是主流的持久化方式。

RDB持久化

RDB持久化:快照持久化,文件的后缀名是.rdb,redis每次重启时都会读取rdb文件进行恢复。有save和bgsave

save:可以在配置文件声明,也可以手动

  • 执行save之后,主进程会进入阻塞。
  • 读写都不能执行
  • 主进程创建rdb文件,直到rdb文件创建完成之后,进程的阻塞才能结束。

bgsave:向主进程发送一个信号,主进程fork(后台)新建一个子进程,在fork的过程中,主进程阻塞,创建完子进程之后,阻塞结束,子进程来创建rdb文件。

redis配置文件/etc/redis/redis.conf 

进入redis命令行模式,执行bgsave命令,生产新的rdb文件/var/lib/redis/dump.rdp文件,复制保存到别的目录下,恢复的话,删除新的rdb文件,把旧的rdb文件再复制过来就行。恢复过程中要先关闭redis,恢复好了之后再重启。

AOF持久化

一旦开启AOF持久化,redis会默认选择aof作为持久化方式,并且立刻读取二进制文件。

开启AOF,一定要在初始化时开启。

redis配置文件/etc/redis/redis.conf ,启用二进制日志文件。

  • 启用二进制日志文件,之前的数据都会被清空,适合初始化使用。

生产二进制日志文件/var/lib/redis/appendonly.aof,我们所有操作都记录在这个文件里,如果想要恢复日志,直接vim进去操作即可。

优化项截断

  • 当发现aof文件被截断时,如果是yes,redis在重启时发现被截断,redis会尽可能的恢复数据,继续运行;如果时no,redis在重启时发现被截断,redis会拒绝启动。
  • 截断:写入的过程中出现异常,内存当中有,但是没有完整的写入到磁盘。

AOF的rewrite机制:重写

重写表示的是压缩,当这个二进制日志文件越来越多,文件越来越大,于是就有了重写的功能,对二进制日志文件进行压缩。

bgrewriteaof进程来进行处理

redis-cli bgrewriteaof

如果涉及到数据迁移,rewrite只支持向上兼容(redis 5—>redis 6)。

RDB和AOF之间的优缺点

1、RDB的文件体积比AOF文件小,适合全量备份,速度也比AOF快。

2、RDB不能实时持久化,数据如此重要,不能够丢失。

3、RBD的兼容性比AOF要差,新老版本之间不能兼容。

4、AOF的实时持久化的,兼容性好,文本格式保存命令。

5、AOF的日志文件比较大,恢复速度比较慢,对磁盘的I/O性能要求也高。

生产中,redis的版本一定要一致,目前最稳定的是5.0.7版本

redis的性能管理

查看redis内存使用情况

  • used_memory:914128:redis数据占用的内存
  • used_memory_rss:11403264:redis向操作系统申请的内存
  • used_memory_peak:976192:redis使用系统内存的峰值(最大值)

  • allocator_frag_ratio:1.26:分配器的碎片比例,分配器的碎片越多,浪费的内存越多,这个值越小越好。
  • allocator_rss_ratio:2.60:分配器使用多少系统的内存
  • rss_overhead_ratio:2.68:rss的开销比例,占用系统的物理内存的额外开销,这个值越小越好。
  • mem_fragmentation_ratio:13.38:内存的碎片(系统分配之后,但不能利用的内存)比例,越低,内存的利用率越高

设置阈值

配置redis的初始化,必须要给redis的内存设置阈值,如果不设置阈值,只要有需要,redis会占满整个内存,而且会继续占用交换分区的空间。

设置阈值后,不会使用交换分区了,到达阈值,系统会自动回收生命周期不足的key。

设置阈值

设置回收机制

回收机制算法

volatile-lru:根据算法lru,从过期时间的数据集合当中淘汰键值,主要针对设置了ttl的键值。

volatile-ttl:根据算法,淘汰即将过期的数据,也是针对设置生命周期的数据

一直删除到小于或者等于内存阈值,才不会继续删除。

redis的雪崩、击穿和穿透

缓存雪崩:整个作为数据库缓存的键值对,全部失效,redis没有办法处理缓存,所有的请求全部集中到数据库上。

redis的雪崩的原因:

  • redis集群大面积故障
  • 所有的缓存键值对全部被删除(作为数据库缓存的键值对是不会设置生命周期)
  • 大量redis请求失败,所有的请求直接到了数据库

redis的击穿:热点数据的缓存失效,大量的热点请求全部转发到了数据库,会导致数据库的性能大幅下降。

最简单的方法是热点数据设置成永不过期。

遇到redis的击穿处理方法:

  1. 我通过mysql的慢查询日志,发现sql执行的速度突然大幅下降
  2. 查询redis,发现缓存的键值对消失了
  3. 我没有redis的密码,由专门负责数据库的人处理。

redis的缓存穿透:缓存的键值对对数据库当中都没有数据,但是依然有客户端不断在请求,黑客在利用漏洞,把大量请求绕过radis,去压垮数据库。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/bicheng/65735.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

[论文阅读] (34)ESWA2024 基于SGDC的轻量级入侵检测系统

《娜璋带你读论文》系列主要是督促自己阅读优秀论文及听取学术讲座,并分享给大家,希望您喜欢。由于作者的英文水平和学术能力不高,需要不断提升,所以还请大家批评指正,非常欢迎大家给我留言评论,学术路上期…

深入解析:谱分解、SVD与PCA在算法中的应用与实现

特征值分解(EVD)、奇异值分解(SVD)和主成分分析(PCA)是矩阵分解技术的三种重要形式,它们在人工智能中扮演了关键角色。随着数据维度的快速增长和信息复杂度的提升,这些技术为处理高维…

[2025] 如何在 Windows 计算机上轻松越狱 IOS 设备

笔记 1. 首次启动越狱工具时,会提示您安装驱动程序。单击“是”确认安装,然后再次运行越狱工具。 2. 对于Apple 6s-7P和iPad系列(iOS14.4及以上),您应该点击“Optinos”并勾选“允许未经测试的iOS/iPadOS/tvOS版本”&…

【笔记】在虚拟机中通过apache2给一个主机上配置多个web服务器

(配置出来的web服务器又叫虚拟主机……) 下载apache2 sudo apt update sudo apt install apache2 (一)ip相同 web端口不同的web服务器 进入 /var/www/html 创建站点一和站点二的目录文件(目录文件名自定义哈&#x…

vim里搜索关键字

vim是linux文本编辑器的命令,再vi的基础上做了功能增强 使用方法如下 1. / 关键字, 回车即可, 按n键查找关键字下一个位置 2.? 关键字, 回车即可, 按n键查找关键字下一个位置 3.示例

小程序中引入echarts(保姆级教程)

hello hello~ ,这里是 code袁~💖💖 ,欢迎大家点赞🥳🥳关注💥💥收藏🌹🌹🌹 🦁作者简介:一名喜欢分享和记录学习的在校大学生…

15-利用dubbo远程服务调用

本文介绍利用apache dubbo调用远程服务的开发过程,其中利用zookeeper作为注册中心。关于zookeeper的环境搭建,可以参考我的另一篇博文:14-zookeeper环境搭建。 0、环境 jdk:1.8zookeeper:3.8.4dubbo:2.7.…

一个最简单的ios程序(object_c)的编写

前言 如何在苹果系统MacOS创建一个简单的ios(iphone)程序,貌似非常的简单。但是,作为习惯了Windows开发的程序员来说,有时候还觉得有点麻烦,至少开始有点很不习惯。 本博文试着把这个过程展现一下&#xff…

Rabbitmq追问2

分析rabbitmq 默认使用姿势是什么 direct fanout还是什么 public void convertAndSend(String exchange, String routingKey, Object object, CorrelationData correlationData) throws AmqpException { this.send(exchange, routingKey, this.convertMessageIfNecessary(obje…

[文献阅读]ReAct: Synergizing Reasoning and Acting in Language Models

文章目录 摘要Abstract:思考与行为协同化Reason(Chain of thought)ReAct ReAct如何协同推理 响应Action(动作空间)协同推理 结果总结 摘要 ReAct: Synergizing Reasoning and Acting in Language Models [2210.03629] ReAct: Synergizing Reasoning an…

Rocky Linux下安装meld

背景介绍: meld是一款Linux系统下的用于 文件夹和文件的比对软件,非常常用; 故障现象: 输入安装命令后,sudo yum install meld,报错。 12-31 22:12:17 ~]$ sudo yum install meld Last metadata expirat…

【亚马逊云】基于Amazon EC2实例部署 NextCloud 云网盘并使用 Docker-compose 搭建 ONLYOFFICE 企业在线办公应用软件

文章目录 1. 部署EC2实例2. 安装 Docker 服务3. 安装docker-compose4. 创建Docker-compose文件5. 创建nginx.conf文件6. 运行docker-compose命令开始部署7. 访问ONLYOFFICE插件8. 访问NextCloud云盘9. 下载并启用ONLYOFFICE插件10. 上传文件测试11. 所遇问题12. 参考链接 1. 部…

揭秘文件上传漏洞之操作原理(Thoughts on File Upload Vulnerabilities)

从上传到入侵:揭秘文件上传漏洞之操作原理 大家好,今天我们来聊一个"老而弥坚"的漏洞类型 —— 文件上传漏洞。虽然这个漏洞存在很多年了,但直到现在依然频频出现在各种漏洞报告中。今天我们就来深入了解一下它的原理和各种校验方…

哈夫曼编码(Huffman Coding)与哈夫曼树(Huffman Tree)

已知字符集{a,b,c,d,e,f},若各字符出现的次数分别为6,3,8,2,10,4,则对应字符集中各字符的哈夫曼编码可能是( )。 A.00,1011,01&#xff0…

R语言入门笔记:第一节,快速了解R语言——文件与基础操作

关于 R 语言的简单介绍 上一期 R 语言入门笔记里面我简单介绍了 R 语言的安装和使用方法,以及各项避免踩坑的注意事项。我想把这个系列的笔记持续写下去。 这份笔记只是我的 R 语言入门学习笔记,而不是一套 R 语言教程。换句话说:这份笔记不…

微信小程序调用 WebAssembly 烹饪指南

我们都是在夜里崩溃过的俗人,所幸终会天亮。明天就是新的开始,我们会变得与昨天不同。 一、Rust 导出 wasm 参考 wasm-bindgen 官方指南 https://wasm.rust-lang.net.cn/wasm-bindgen/introduction.html wasm-bindgen,这是一个 Rust 库和 CLI…

自动驾驶3D目标检测综述(六)

停更了好久终于回来了(其实是因为博主去备考期末了hh) 这一篇接着(五)的第七章开始讲述第八章的内容。第八章主要介绍的是三维目标检测的高效标签。 目录 第八章 三维目标检测高效标签 一、域适应 (一)…

计算机毕业设计hadoop+spark+hive图书推荐系统 豆瓣图书数据分析可视化大屏 豆瓣图书爬虫 知识图谱 图书大数据 大数据毕业设计 机器学习

温馨提示:文末有 CSDN 平台官方提供的学长联系方式的名片! 温馨提示:文末有 CSDN 平台官方提供的学长联系方式的名片! 温馨提示:文末有 CSDN 平台官方提供的学长联系方式的名片! 作者简介:Java领…

极品飞车6的游戏手柄设置

极品飞车,既可以用键盘来控制车辆的前进、后退、左转、右转、加速与减速,也可以使用游戏手柄来操作车辆的运行。需要注意的是,极品飞车虽然支持手柄,但是仅支持常见的北通、罗技还有部分Xbox系列的手柄,至于其他的PS4手…

虚拟机Centos下安装Mysql完整过程(图文详解)

目录 一. 准备工作 1. 设置虚拟机静态IP 2. 卸载Mysql 3. 给CentOS添加rpm源 二. 安装MySQL 1. 安装mysql服务 2. 启动mysql服务 3. 开启MySQL开机自启动 4. 查看mysql服务状态 5. 查看mysql初始密码 6. 登录mysql ,修改密码 7. 允许外部访问MySQL数据库…