Redis如何解决热Key问题

目录

    • **如何解决 Redis 的热 Key(Hot Key)问题?**
      • **解决方案**
    • **1. 使用多级缓存**
      • **方案**
    • **2. 进行 Key 预分片(Key Sharding)**
      • **方案**
    • **3. 使用 Redis 复制机制(主从复制或集群)**
      • **方案**
    • **4. 采用批量 Key 轮换(Consistent Hash)**
      • **方案**
    • **5. 采用异步更新策略**
      • **方案**
    • **6. 限流和降级**
      • **方案**
    • **7. 结合 MQ 做异步削峰**
      • **方案**
    • **总结**
      • **面试标准回答**

如何解决 Redis 的热 Key(Hot Key)问题?

热 Key(Hot Key)是指访问频率极高的键,在高并发场景下可能会造成:

  1. 单个 Redis 节点压力过大(大量请求命中一个 Key)。
  2. CPU 过载,响应变慢(甚至影响整个 Redis 集群)。
  3. 缓存失效后大量请求直接打到数据库,导致数据库崩溃(缓存击穿)。

解决方案

针对不同场景,解决方案主要包括 “分散请求”“降低 Redis 负载” 两个方向。


1. 使用多级缓存

核心思路:在 Redis 之前增加一级缓存,减少 Redis 访问压力。

方案

  1. 本地缓存(L1 Cache)

    • 在应用服务器上存储热点数据(如 Guava Cache, Caffeine)。
    • 优点:访问速度更快,避免 Redis 过载。
    • 缺点:如果多个应用服务器同时缓存相同 Key,可能会有数据一致性问题。
  2. CDN 缓存(L0 Cache)

    • 适用于静态资源或热点数据(如商品详情页)。
    • 优点:减少数据库、Redis 访问压力。

示例:使用 Guava 本地缓存

LoadingCache<String, String> localCache = CacheBuilder.newBuilder().maximumSize(1000).expireAfterWrite(10, TimeUnit.MINUTES).build(new CacheLoader<String, String>() {public String load(String key) throws Exception {return redis.get(key); // 从 Redis 取数据}});// 读取缓存
String value = localCache.get("hot_key");

2. 进行 Key 预分片(Key Sharding)

核心思路将单个热 Key 拆分成多个 Key,让不同的 Redis 节点存储不同的副本,从而分散压力。

方案

  • 存储时:写入多个不同的 Key,例如 hot_key_1, hot_key_2, hot_key_3
  • 查询时:随机访问 hot_key_n,或使用一致性 Hash 计算 Key。

示例

// 写入时分片
for (int i = 0; i < 3; i++) {redis.set("hot_key_" + i, value);
}// 读取时随机选一个
String key = "hot_key_" + (rand() % 3);
String value = redis.get(key);

适用场景

  • 高并发计数(如热点直播间点赞)。
  • 高 QPS 的热点数据(如秒杀商品库存)。

3. 使用 Redis 复制机制(主从复制或集群)

核心思路通过 Redis 读写分离,多个节点分担读取压力

方案

  • 主节点(Master)处理写请求,多个从节点(Slave)处理读请求
  • 结合 客户端负载均衡,将 get 请求分发到不同的从节点。

示例(配置 Redis 读从库)

slaveof master_ip master_port

适用场景

  • 适用于 Redis 集群模式,大规模热 Key 分布式缓存场景。

4. 采用批量 Key 轮换(Consistent Hash)

核心思路通过一致性哈希(Consistent Hashing)降低热 Key 访问压力

方案

  1. 将一个 Key 拆分成多个时间窗口 Key
  2. 访问时随机选择一个 Key,确保热点数据均匀分布。
  3. 定期清理过时的 Key

示例

String key = "hot_key:" + (time(nullptr) % 5); // 轮换 Key
redis.set(key, value);

适用场景

  • 防止缓存击穿(热点数据定期轮换)。
  • 适用于短周期热点数据(如秒杀、短时间访问高峰)。

5. 采用异步更新策略

核心思路缓存失效后,先返回旧值,同时异步更新缓存,避免大量请求瞬间打到数据库。

方案

  • 采用 双缓存(Double Cache) 机制:
    1. 用户查询时返回旧缓存
    2. 后台异步更新新数据

示例

String value = redis.get("hot_key");
if (value == null) {value = localCache.get("hot_key");  // 先从本地缓存读取asyncUpdateRedis(); // 后台线程更新 Redis
}
return value;

适用场景

  • 避免缓存击穿问题(如商品价格、秒杀库存)。

6. 限流和降级

核心思路:如果 Redis 无法支撑高并发请求,可以限制请求频率,或者直接返回默认值

方案

  1. 限流(使用令牌桶 / 滑动窗口)

    • 限制相同 Key 的访问频率。
    • 避免短时间内 Redis 负载过高。
  2. 降级(请求超时时返回默认值)

    • 如果 Redis 繁忙,则返回本地默认值,减少 Redis 压力。

示例(限流)

local key = KEYS[1]
local limit = tonumber(ARGV[1])
local current = redis.call('incr', key)if current == 1 thenredis.call('expire', key, 60) -- 60s 过期
endif current > limit thenreturn 0 -- 限流失败
end
return 1

适用场景

  • API 访问频率控制(如抢购、直播点赞)。

7. 结合 MQ 做异步削峰

核心思路将高并发请求写入消息队列(如 Kafka / RabbitMQ),异步处理,降低 Redis 访问压力。

方案

  1. 将请求写入 Kafka,批量处理。
  2. 后端定期刷新缓存,避免 Redis 承担高并发压力。

示例

// 生产者:将查询请求写入 MQ
kafkaProducer.send("hotKeyTopic", "hot_key");// 消费者:异步更新缓存
kafkaConsumer.onMessage(msg -> {String value = queryDatabase("hot_key");redis.set("hot_key", value);
});

适用场景

  • 适用于秒杀、短时热点数据(如抢购、热点新闻)。

总结

方法核心思路适用场景
多级缓存L1(本地缓存)+ L2(Redis 缓存)低延迟读取,热点数据
Key 预分片拆分热 Key,分散访问压力高并发计数(直播点赞、热点商品)
主从复制读写分离,提高读性能Redis 集群,读多写少
轮换 Key使用 Hash 轮转 Key秒杀库存、短时间热点数据
异步更新先返回旧缓存,后台更新价格、秒杀商品库存
限流和降级限制访问频率,防止 Redis 过载高 QPS 接口,秒杀抢购
MQ 削峰通过 Kafka / RabbitMQ 处理请求高并发订单、热点数据

面试标准回答

解决 Redis 热 Key 主要有 3 类方法

  1. 减少 Redis 访问压力(本地缓存、CDN、读写分离)。
  2. 分散 Key 访问(Key 预分片、轮换 Key)。
  3. 限制并发(限流、降级、MQ 削峰)。
    最推荐的方案是:本地缓存 + Key 预分片 + Redis 读写分离,结合业务需求选择最优方案!🚀

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/895896.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

云计算架构学习之Ansible-playbook实战、Ansible-流程控制、Ansible-字典循环-roles角色

一、Ansible-playbook实战 1.Ansible-playbook安装软件 bash #编写yml [rootansible ansible]# cat wget.yml - hosts: backup tasks: - name: Install wget yum: name: wget state: present #检查playbook的语法 [rootansible ansible]…

【Web前端开发精品课 HTML CSS JavaScript基础教程】第二十四章课后题答案

文章目录 问题1&#xff1a;问题2&#xff1a;问题3&#xff1a; 问题1&#xff1a; 在HTML中嵌入JavaScript&#xff0c;应该使用的标签是&#xff08; &#xff09;。 选项&#xff1a; A. <style></style> B. <script></script> C. <js><…

用python进行二分法查找(python实例三十)

目录 1.认识Python 2.环境与工具 2.1 python环境 2.2 Visual Studio Code编译 3.代码示例 4.运行结果 1.认识Python Python 是一个高层次的结合了解释性、编译性、互动性和面向对象的脚本语言。 Python 的设计具有很强的可读性&#xff0c;相比其他语言经常使用英文关键…

Qt学习(五)自定义对话框,多窗口开发---添加设计师类, MDI多窗口开发

一 对话框 实现功能&#xff1a;打开文件&#xff0c;选择目录&#xff0c;保存文件&#xff0c;选择颜色&#xff0c;选择字体&#xff0c;输入信息&#xff0c; 消息提示框 #ifndef MAINWINDOW_H #define MAINWINDOW_H#include <QMainWindow>QT_BEGIN_NAMESPACE na…

用 Python 实现简易的 Web 爬虫:从入门到实战

一、引言 在信息爆炸的时代,网络上蕴含着海量的数据。如果我们想要获取特定的信息,手动从网页上复制粘贴显然效率极低。这时,Web 爬虫就派上了用场。Web 爬虫是一种自动获取网页内容的程序,它可以模拟人类在浏览器中的操作,快速地抓取网页上的数据。本文将带领大家使用 Py…

机器视觉检测中,2D面阵相机和线扫相机的区别

2D面阵相机和线扫相机是工业视觉系统中常用的两种相机类型&#xff0c;各有其特点和应用场景。 2D面阵相机 特点&#xff1a; 成像方式&#xff1a;通过二维传感器一次性捕捉整个场景的图像。 分辨率&#xff1a;分辨率由传感器的像素数决定&#xff0c;常见的有百万像素到几千…

ECharts极简入门

ECharts 是一个基于 JavaScript的开源可视化图表库&#xff0c;广泛应用于数据可视化的场景中&#xff0c;支持多种图表类型&#xff0c;如柱状图、折线图、饼图、散点图、雷达图等&#xff0c;且具有强大的自定义功能。 1. ECharts 基本使用 首先需要引入 ECharts 库&#xf…

go设置镜像代理

前言 在 Go 开发中&#xff0c;如果直接从官方源&#xff08;https://proxy.golang.org&#xff09;下载依赖包速度较慢&#xff0c;可以通过设置 镜像代理 来加速依赖包的下载。以下是增加 Go 镜像代理的详细方法&#xff1a; 一、设置 Go 镜像代理 1. 使用环境变量设置代理…

Linux部署DeepSeek r1 模型训练

之前写过一篇windows下部署deepseekR1的文章&#xff0c;有小伙伴反馈提供一篇linux下部署DeepSeek r1 模型训练教程&#xff0c;在 Linux 环境下&#xff0c;我找了足够的相关资料&#xff0c;花费了一些时间&#xff0c;我成功部署了 DeepSeek R1 模型训练任务&#xff0c;结…

AI Agent架构深度解析:从ReAct到AutoGPT,自主智能体的技术演进与工程实践

前言 觉得不错就点个赞吧&#xff01;。 一、AI Agent技术架构演进图谱 &#xff08;配图&#xff1a;AI Agent架构演进时间轴&#xff0c;标注关键技术节点&#xff09; 1.1 三代架构对比分析 架构类型代表系统核心特征局限性反应式DeepBlue预置规则库无长期记忆认知式Wats…

嵌入式经常用到串口,如何判断串口数据接收完成?

说起通信&#xff0c;首先想到的肯定是串口&#xff0c;日常中232和485的使用比比皆是&#xff0c;数据的发送、接收是串口通信最基础的内容。这篇文章主要讨论串口接收数据的断帧操作。 空闲中断断帧 一些mcu&#xff08;如&#xff1a;stm32f103&#xff09;在出厂时就已经在…

HTML/CSS中并集选择器

1.作用:选中多个选择器对应的元素,又称:分组选择器 所谓并集就是或者的含义. 2.语法:选择器1,选择器2,选择器3,......选择器n 多个选择器通过,连接,此处,的含义就是:或. .rich,.beauty{color: blue;} 3.注意事项 1.并集选择器,我们一般竖着写 2.任何形式的选择器,都可以作为并…

解锁机器学习核心算法 | 随机森林算法:机器学习的超强武器

一、引言 在机器学习的广阔领域中&#xff0c;算法的选择犹如为一场冒险挑选趁手的武器&#xff0c;至关重要。面对海量的数据和复杂的任务&#xff0c;合适的算法能够化繁为简&#xff0c;精准地挖掘出数据背后隐藏的模式与价值。机器学习领域有十大核心算法&#xff0c;而随…

Shapr3D在ipad上无法识别鼠标点击问题

此问题我去过长沙Apple官方直营店咨询过此问题&#xff0c;官方直营店也不知道解决方案&#xff0c;遂在此提醒长沙Apple官方线下直营店的所有店员。 问题描述 1.不知道为什么在买了Magic Keyboard后还是无法识别单击触控板&#xff0c;遂为了解决这个问题我特意从江西跑到长沙…

【架构】微内核架构(Microkernel Architecture)

微内核架构(Microkernel Architecture) 核心思想 微内核架构(又称插件式架构)通过最小化核心系统,将可扩展功能以插件模块形式动态加载,实现高内聚低耦合。其核心设计原则: 核心最小化:仅封装基础通用能力(如插件管理、通信机制、安全校验)功能插件化:所有业务功能…

AI 编程助手 cursor的系统提示词 prompt

# Role 你是一名极其优秀具有10年经验的产品经理和精通java编程语言的架构师。与你交流的用户是不懂代码的初中生&#xff0c;不善于表达产品和代码需求。你的工作对用户来说非常重要&#xff0c;完成后将获得10000美元奖励。 # Goal 你的目标是帮助用户以他容易理解的…

javaSE学习笔记21-线程(thread)-锁(synchronized 与Lock)

死锁 多个线程各自占有一些共享资源&#xff0c;并且互相等待其他线程占有的资源才能运行&#xff0c;而导致两个或者多个线程 都在等待对方释放资源&#xff0c;都停止执行的情形&#xff0c;某一个同步块同时拥有“两个以上对象的锁”时&#xff0c;就可能 会发生“死锁&quo…

uni-app发起网络请求的三种方式

uni.request(OBJECT) 发起网络请求 具体参数可查看官方文档uni-app data:请求的参数; header&#xff1a;设置请求的 header&#xff0c;header 中不能设置 Referer&#xff1b; method&#xff1a;请求方法&#xff1b; timeout&#xff1a;超时时间&#xff0c;单位 ms&a…

SpringBoot速成概括

视频&#xff1a;黑马程序员SpringBoot3Vue3全套视频教程&#xff0c;springbootvue企业级全栈开发从基础、实战到面试一套通关_哔哩哔哩_bilibili 图示&#xff1a;

GoFound 与 MySQL 集成优化方案

GoFound 与 MySQL 集成优化方案 1. 明确需求 文章信息存储在 MySQL 数据库中。使用 GoFound 实现全文搜索功能。搜索时&#xff0c;先从 GoFound 中获取匹配的文章 ID&#xff0c;然后从 MySQL 中查询完整的文章信息。 2. 优化思路 数据同步&#xff1a;将 MySQL 中的文章数…