Redis 内存淘汰策略详解

Redis 内存淘汰策略详解

  • 一、简介
    • Redis
    • 内存管理问题
  • 二、内存淘汰策略
    • 1.为什么需要内存淘汰策略
    • 2.内存淘汰策略分类
      • (1)noeviction
      • (2)allkeys-lru
      • (3)allkeys-lfu
      • (4)volatile-lru
      • (5)volatile-lfu
      • (6)volatile-ttl
  • 三、策略详解
    • noeviction
    • allkeys-lru
    • volatile-lru
    • allkeys-random
    • volatile-random
    • volatile-ttl
    • volatile-lfu
    • LFU 最少频繁使用算法
    • LRU 最近最少使用算法
  • 四、如何选择适合的内存淘汰策略
    • 内存淘汰策略选择时需要考虑的因素
      • 系统的容忍度
      • 缓存数据的重要性
      • 内存使用情况
      • 业务场景
    • 如何根据业务场景来选择合适的内存淘汰策略
      • noeviction 策略
      • volatile-lru 策略
      • volatile-ttl 策略
      • allkeys-lru 策略

一、简介

Redis

Redis 是一款高性能的非关系型数据库,它支持多种数据结构,如字符串、哈希、列表、集合、有序集合和 HyperLogLog。Redis 可以用于缓存、消息队列、应用程序中的数据结构存储等场景,它的优点是响应速度快、支持丰富的数据结构和扩展性好。

内存管理问题

Redis 将所有数据都存储在内存中,因此内存管理就成为了 Redis 中需要解决的一个重要问题。当 Redis 的内存使用达到最大内存限制时,Redis 将无法再接受写请求,并根据内存淘汰策略淘汰一部分数据腾出内存。

二、内存淘汰策略

1.为什么需要内存淘汰策略

当 Redis 内存使用达到最大内存限制时,如果继续进行写入操作会导致 Redis 服务崩溃。因此,为了保证 Redis 服务的稳定性,Redis 在内存使用达到最大限制时采取一系列措施,如内存淘汰、警告等。

2.内存淘汰策略分类

Redis 内存淘汰策略主要有 6 种:

(1)noeviction

不执行任何的淘汰策略,直接返回错误信息。这种方式可能导致内存使用过多而导致 Redis 崩溃。

(2)allkeys-lru

从所有的键中选取最近最少使用的数据淘汰。这种方式通常可以保留热点数据,但是可能会出现内存碎片,导致内存浪费。

(3)allkeys-lfu

从所有的键中选取访问频率最少的数据进行淘汰。这种方式适用于处理访问分布相对均匀的数据。

(4)volatile-lru

只从设定了过期时间(ttl)的键中选取最近最少使用的数据淘汰。这种方式适用于缓存等使用场景。

(5)volatile-lfu

只从设定了过期时间(ttl)的键中选取访问频率最少的数据进行淘汰。

(6)volatile-ttl

只从设定了过期时间(ttl)的键中选取即将过期的数据进行淘汰。这种方式适用于缓存等使用场景。

三、策略详解

在 Redis 中,为了防止内存溢出,在内存不足以容纳更多数据时,Redis 会通过内存淘汰策略来淘汰一些键值对,以便给新的键值对腾出空间。下面我们将详细介绍 Redis 支持的内存淘汰策略。

noeviction

这是 Redis 的默认策略,这意味着当内存满了时,任何写操作(如 SET,HSET 等)都会返回一个错误,这种情况下,需要管理员手动清除一些键值对或者增加内存才能继续进行写操作。

allkeys-lru

该策略会针对所有的键使用 LRU(最近最少使用)算法来淘汰键值对。对于 Redis 的所有键,按照最近最少使用的原则,优先淘汰那些最近没有使用或很久没有使用的键值对。

# 配置为 allkeys-lru 策略
maxmemory-policy allkeys-lru

volatile-lru

在这种模式下,Redis 会选择过期时间较近的键来淘汰。如果一个键设置了过期时间,并且距离过期时间较远,那么 Redis 不会考虑淘汰该键值对。相反,如果一个键离过期时间只有很短的一段时间,那么 Redis 会优先淘汰该键值对。

# 配置为 volatile-lru 策略
maxmemory-policy volatile-lru

allkeys-random

在这种模式下,Redis 会随机地淘汰一些键值对,重点考虑键值对的访问频率以及键空间。

# 配置为 allkeys-random 策略
maxmemory-policy allkeys-random

volatile-random

同 allkeys-random 模式类似,但它只针对开启过期时间的键空间进行淘汰。

# 配置为 volatile-random 策略
maxmemory-policy volatile-random

volatile-ttl

在这种模式下,Redis 会选择最接近超时的键来淘汰。它与 volatile-lru 类似,不同之处在于它侧重于超时的键而非最近最少使用的键。

# 配置为 volatile-ttl 策略
maxmemory-policy volatile-ttl

volatile-lfu

该策略中采用的是 LFU(最不常用)算法。Redis 会优先淘汰使用频率最少的键值对。

# 配置为 volatile-lfu 策略
maxmemory-policy volatile-lfu

LFU 最少频繁使用算法

除了 volatile-lfu 策略的支持以外,Redis 还支持使用 LFU 算法的淘汰策略。这种策略适用于需要使用最少频繁使用算法淘汰键值对的场景。

# 配置为 LFU 策略
maxmemory-policy lfu

LRU 最近最少使用算法

除了 allkeys-lru 和 volatile-lru 策略以外,Redis 还支持使用 LRU 算法的淘汰策略。这种策略适用于需要使用最近最少使用算法淘汰键值对的场景。

# 配置为 LRU 策略
maxmemory-policy lru

四、如何选择适合的内存淘汰策略

在使用 Redis 时,为了保持系统运行的稳定性和性能,我们需要针对不同的业务场景选择适合的内存淘汰策略。下面将介绍在进行策略选择时需要考虑的因素以及如何根据业务场景来选择合适的内存淘汰策略。

内存淘汰策略选择时需要考虑的因素

系统的容忍度

系统的容忍度是指当前系统中可容忍的缓存数据被淘汰的数量。当系统的容忍度较高时,我们可以采用一些较激进的淘汰策略,例如 noeviction 策略或 volatile-lru 策略。当系统的容忍度较低时,则需要选择一些保守的淘汰策略。

缓存数据的重要性

对于不同的缓存数据,其重要性也是不同的。例如,某些缓存数据可能对应着用户的个人信息或者是支付订单等重要信息,这些数据就需要采用较为严格的淘汰策略进行保护。而对于一些只是用于辅助计算的缓存数据,则可以采用较为宽松的淘汰策略。

内存使用情况

当内存使用情况较为充足时,我们可以适当采用一些较为激进的淘汰策略来提升系统的性能。而当内存使用情况较为紧张时,则需要选择一些较为保守的淘汰策略,保证系统的稳定运行。

业务场景

不同的业务场景对于淘汰策略的要求也是不同的。例如,对于一些缓存的数据是需要长时间保存的,此时我们就需要选择一些长期使用率较高的策略进行淘汰。而对于一些需要频繁更新或者只需要用于临时计算的数据,则可以采用一些比较激进的策略。

如何根据业务场景来选择合适的内存淘汰策略

noeviction 策略

该策略是 Redis 默认的淘汰策略,其特点是不对缓存数据进行淘汰,当 Redis 内存达到限制时会导致写操作失败。该策略适用于系统中的大部分数据都是必须不可缺少、不能删除的情况。通常我们也会针对这种情况进行缓存穿透和雪崩的处理。

# 在 Redis 配置文件中添加以下配置
maxmemory-policy noeviction

volatile-lru 策略

该策略会淘汰掉最近最少使用(Least Recently Used)的带有过期时间的缓存数据。在对于缓存数据有较为明确的过期时间限制,并且对于历史数据使用的概率相对较小的情况下可以采用该策略。

# 在 Redis 配置文件中添加以下配置
maxmemory-policy volatile-lru
maxmemory 4mb

volatile-ttl 策略

该策略会淘汰掉剩余时间最短的缓存数据,通常适合缓存数据过期时间比较接近或者过期时间比较难估计的场景。

# 在 Redis 配置文件中添加以下配置
maxmemory-policy volatile-ttl
maxmemory 4mb

allkeys-lru 策略

该策略会淘汰掉最近最少使用的所有缓存数据,适合对缓存数据淘汰没有任何限制,而且服务的数据模式和访问频度难以预测,无法确定是热点访问或者是冷访问的情况。

# 在 Redis 配置文件中添加以下配置
maxmemory-policy allkeys-lru
maxmemory 4mb

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/66403.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Error: PostCSS plugin autoprefixer requires PostCSS 8 问题解决办法

报错:Error: PostCSS plugin autoprefixer requires PostCSS 8 原因:autoprefixer版本过高 解决方案: 降低autoprefixer版本 执行:npm i postcss-loader autoprefixer8.0.0

Dubbo 应用切换 ZooKeeper 注册中心实例,流量无损迁移

首先思考一个问题:如果 Dubbo 应用使用 ZooKeeper 作为注册中心,现在需要切换到新的 ZooKeeper 实例,如何做到流量无损? 本文提供解决这个问题的一种方案。 场景 有两个基于 Dubbo 的微服务应用,一个是服务提供者&…

降噪音频转录 Krisp: v1.40.7 Crack

主打人工智能降噪服务的初创公司「Krisp」近期宣布推出音频转录功能,能对电话和视频会议进行实时设备转录。该软件还整合的ChatGPT,以便快速总结内容,开放测试版于今天上线。 随着线上会议越来越频繁,会议转录已成为团队工作的重…

6 | 从文本文件中读取单词并输出不重复的单词列表

Transformation 操作 Transformation 操作是用于从一个 RDD(Resilient Distributed Dataset)创建一个新的 RDD,通常是通过对原始 RDD 的元素进行映射、筛选、分组等操作来实现的。Transformation 操作不会立即执行,而是惰性计算,只有在 Action 操作触发时才会真正执行。以…

Linux执行命令

命令格式 主命令 选项 参数(操作对象)例如: 修改主机名 hostname set-hostname 新名称显示/目录下的文件的详细信息 ls -l /命令 内置命令(builtin):shell程序自带的命令。 外部命令:有独立…

git企业级使用

1.初始Git 1.1创建Git仓库 要提前说的是,仓库是进⾏版本控制的⼀个⽂件⽬录。我们要想对⽂件进⾏版本控制,就必须先创建⼀个仓库出来。创建⼀个Git本地仓库对应的命令为 git init ,注意命令要在⽂件⽬录下执⾏,例如:…

科创板50ETF期权交易:详细规则、费用、保证金和开户攻略

科创板50ETF期权是指以科创板50ETF为标的资产的期权合约。科创板50ETF是由交易所推出的一种交易型开放式指数基金(ETF),旨在跟踪科创板50指数的表现,下文介绍科创板50ETF期权交易:详细规则、费用、保证金和开户攻略&am…

kafka 动态扩容现有 topic 的分区数和副本数

文章目录 [toc]创建一个演示 topic生产一些数据使用消费者组消费数据增加分区无新数据产生,有旧数据未消费有新数据产生,有旧数据未消费 增加副本创建 json 文件使用指定的 json 文件增加 topic 的副本数使用指定的 json 文件查看 topic 的副本数增加的进…

日志文件之间关系和介绍及应用

1.常用日志框架代码举例 Log4j: Log4j是Java中广泛使用的日志框架之一。它提供了灵活的配置选项和丰富的功能,支持日志级别、日志输出目标等。Log4j有1.x版本和2.x版本,其中Log4j 2.x是对1.x的升级和扩展。 Logback: Logback是由Log4j创始人设计的Log4…

Java8新特性2——方法引用

Java8新特性2——方法引用 注:以下内容基于Java 8,所有代码都已在Java 8环境下测试通过 目录: Java8新特性1——函数式接口&lambda表达式方法引用Stream 1. 方法引用 方法引用提供了一种替代 lambda 表达式的语法,允许以更…

Docker 及 Docker Compose 安装指南

Docker 是一个开源的容器化平台,可以帮助我们快速构建、打包和运行应用程序。而 Docker Compose 则是用于管理多个容器应用的工具,可以轻松定义和管理多个容器之间的关系。现在,让我们开始安装过程吧! docker 安装 apt安装 sudo…

C++,多继承

多继承的基本概念 一个类由多个类共同派生被称为多继承。 多继承的格式&#xff1a; class 类名:继承方式1 类名1,继承方式2 类名2,.....,继承方式n 类名n {子类的拓展 }; 示例&#xff1a; #include <iostream> using namespace std;//封装 沙发的类 class Sofa { p…

202. 快乐数

202. 快乐数 编写一个算法来判断一个数 n 是不是快乐数。 「快乐数」 定义为&#xff1a; 对于一个正整数&#xff0c;每一次将该数替换为它每个位置上的数字的平方和。 然后重复这个过程直到这个数变为 1&#xff0c;也可能是 无限循环 但始终变不到 1。 如果这个过程 结果…

从传统到智能化:汽车内部通信的安全挑战与SecOC解决方案

01/需求背景 Demand background 在传统的汽车电子结构中&#xff0c;车内的电控单元&#xff08;ECU&#xff09;数量和复杂性受到限制&#xff0c;通信带宽也受到限制。因此&#xff0c;人们普遍认为车内各个ECU之间的通信是可靠的。只要ECU节点接收到相应的消息&#xff0c…

华为OD机试 - 最长的指定瑕疵度的元音子串 - 正则表达式(Java 2023 B卷 200分)

目录 专栏导读一、题目描述二、输入描述三、输出描述四、解题思路五、Java算法源码六、效果展示1、输入2、输出3、说明 华为OD机试 2023B卷题库疯狂收录中&#xff0c;刷题点这里 专栏导读 本专栏收录于《华为OD机试&#xff08;JAVA&#xff09;真题&#xff08;A卷B卷&#…

9.1 校招 内推 面经

绿泡*泡&#xff1a; neituijunsir 交流裙 &#xff0c;内推/实习/校招汇总表格 1、校招 | 理想汽车2024校园招聘正式启动&#xff08;内推&#xff09; 校招 | 理想汽车2024校园招聘正式启动&#xff08;内推&#xff09; 2、2023校招总结--自动驾驶&#xff08;软开/规控…

[libglog][FFmpeg] 如何把 ffmpeg 的库日志输出到 libglog里

ffmpeg 提供了自己的 log 模块 av_log&#xff0c;会默认把输出打印到 stderr 上&#xff0c;因此无法方便地跟踪日志。但是 ffmpeg 提供了一个接口 av_log_set_callback 以供外界自定义自己的日志输出。 libglog 提供的是c 形式的日志输出样式&#xff0c;因此需要将二者关联起…

代码随想录训练营二刷第十一天 | 20. 有效的括号 1047. 删除字符串中的所有相邻重复项 150. 逆波兰表达式求值

代码随想录训练营二刷第十一天 | 20. 有效的括号 1047. 删除字符串中的所有相邻重复项 150. 逆波兰表达式求值 一、20. 有效的括号 题目链接&#xff1a;https://leetcode.cn/problems/valid-parentheses/ 思路&#xff1a;思路遇到左括号把对应的右括号压入栈&#xff0c;节…

Unity 数据保存失败

问题 游戏数据突然保存不了了 没有任何报错 切后台保存也出问题 编辑器上和PC端没问题 移动端上保存不了 原因 我使用的存储方式是 Newtonsoft.Json 将对象转换成加密字符串并保存到本地 而不巧的是 我使用了 HashSet 这导致Newtonsoft.Json在转换的时候崩掉 且没有报错提示…

视频文件损坏无法播放如何修复?导致视频文件损坏的原因

如果我们遇到因视频文件损坏而无法正常播放&#xff0c;我们该怎么办&#xff1f;这种情况通常意味着视频文件已经损坏。我们不能访问、编辑或使用它们。那么应该用什么正确的工具和修复程序来修复视频呢&#xff1f; 视频文件损坏的原因 了解视频损坏如何修复之前&#xff0c…