[Redis]——缓存击穿和缓存穿透及解决方案(图解+代码+解释)

目录

一、缓存击穿(热点Key问题)

1.1 问题描述

1.2 解决方案及逻辑图

    1.2.1 互斥锁

    1.2.2 逻辑过期

二、缓存穿透

2.1 问题描述

2.2 解决方案逻辑图

2.2.1 缓存空对象

2.2.2 布隆过滤器


一、缓存击穿(热点Key问题)

  • 个人理解:

        这里先提前说一下,热点Key问题不考虑缓存穿透了,也就是不考虑命中空缓存了,因为这种一般用于活动秒杀,这些热点Key都是提前存储好的(貌似是这样的,我也不太确定~~)

1.1 问题描述

    经常被查询的一个Key突然失效或者宕机了,导致重建缓存,由于是热点Key,所以有不断的线程来查和重建缓存,导致大量数据到达数据库,这种我们称为缓存击穿

1.2 解决方案及逻辑图

    1.2.1 互斥锁

解释:

    如果未命中缓存,先获取互斥锁,获取锁之后要再次检查缓存,如果还是未命中进行缓存重建,这样当其他线程来的时候就会获取锁失败,这时我们让这个线程休眠一会,重新查询缓存,如果命中就返回嘛,如果没命中再次尝试获取锁,假设这次获取锁成功了,还是再次检查缓存,如果未命中重建缓存。

优点:可保证数据高一致性

缺点:性能低,可能发生死锁

 🦈->逻辑图

 🦈->上代码

   public Shop solveCacheMutex(Long id){// 查询redis中有无数据String key = "cache:shop:" + id;String shopCache = stringRedisTemplate.opsForValue().get(key);if(StrUtil.isNotBlank(shopCache)){// 命中缓存return JSONUtil.toBean(shopCache, Shop.class);}// 判断缓存穿透问题 - shopCaache如果为“” 命中空缓存 如果为null 需要查询数据库if(shopCache != null){// 命中空缓存return null;}// 2.1未命中缓存 尝试获取互斥锁String lockKey = "lock:shop:" + id;Shop shop = null;try {boolean lock = tryLock(lockKey);if(!lock){// 获取锁失败Thread.sleep(50);return solveCacheMutex(id);}// 获取锁成功// 再次检查Redis是否有缓存shopCache = stringRedisTemplate.opsForValue().get(key);if(StrUtil.isNotBlank(shopCache)){return JSONUtil.toBean(shopCache, Shop.class);}// 查询数据库shop = getById(id);// 店铺不存在if(shop == null){// 将空值写入RedisstringRedisTemplate.opsForValue().set(key, "", RedisConstants.CACHE_NULL_TTL, TimeUnit.MINUTES);return null;}// 存储RedisstringRedisTemplate.opsForValue().set(key, JSONUtil.toJsonStr(shop), RedisConstants.CACHE_SHOP_TTL, TimeUnit.MINUTES);} catch (InterruptedException e) {throw new RuntimeException(e);} finally {// 释放互斥锁unLock(lockKey);}return shop;}
    1.2.2 逻辑过期

解释:

    为缓存key设置逻辑过期时间(就是加一个字段),假设线程1查询缓存,未命中直接返回,命中判断是否过期发现,没过期也好说直接返回数据就行,已过期,就会尝试获取锁,然后此刻开启新的线程进行缓存重建,线程1返回旧数据,其他线程获取锁失败都返回旧数据。

优点:性能高

缺点:数据可能不一致,实现复杂

🐟->逻辑图

🐟->上代码 

    private static final ExecutorService CACHE_REBUILD_EXECUTOR = Executors.newFixedThreadPool(10);public Shop solveCacheLogicalExpire(Long id){// 查询redis中有无数据String key = "cache:shop:" + id;String shopCache = stringRedisTemplate.opsForValue().get(key);if(StrUtil.isBlank(shopCache)){// 未命中返回nullreturn null;}// 命中缓存 检查是否过期// 未过期 直接返回 注意这里类型转换RedisData redisData = JSONUtil.toBean(shopCache, RedisData.class);JSONObject jsonObject = (JSONObject) redisData.getData(); // 此处是将Bean对象转ObjectJsonShop shop = JSONUtil.toBean(jsonObject, Shop.class);LocalDateTime expireTime = redisData.getExpireTime();if(expireTime.isAfter(LocalDateTime.now())){return shop;}// 过期// 获取锁String lockKey = "lock:shop:" + id;boolean lock = tryLock(lockKey);if(lock){// 成功// 再次检查Redis缓存是否逻辑过期if(expireTime.isAfter(LocalDateTime.now())){// 没过期return shop;}// 再次检查过期// 开启新线程CACHE_REBUILD_EXECUTOR.submit(()->{try {// 重建缓存this.saveShop2Redis(id, 20L);} catch (Exception e) {throw new RuntimeException(e);} finally {unLock(lockKey);}});}// 返回数据return shop;}public void saveShop2Redis(Long id, Long expireSeconds){RedisData redisData = new RedisData();Shop shop = getById(id);redisData.setData(shop);redisData.setExpireTime(LocalDateTime.now().plusSeconds(expireSeconds));stringRedisTemplate.opsForValue().set(RedisConstants.CACHE_SHOP_KEY + id, JSONUtil.toJsonStr(redisData));}

获取锁和释放锁逻辑

    private boolean tryLock(String key){Boolean flag = stringRedisTemplate.opsForValue().setIfAbsent(key, "1", 10, TimeUnit.SECONDS);return BooleanUtil.isTrue(flag);}// 释放锁private void unLock(String key){stringRedisTemplate.delete(key);}

二、缓存穿透

2.1 问题描述

查询的Key压根不存在,所以每次都未命中缓存,直接到数据库,这我们称为缓存穿透。

2.2 解决方案逻辑图

方案① 缓存空对象

方案② 布隆过滤器

2.2.1 缓存空对象

这里原理就不说了,只说下优缺点。然后上代码

  1. 优点:实现简单,维护方便
  2. 缺点:占内存,可能造成短期数据不一致

上代码

    public Shop solveCacheThrow(Long id){// 查询redis中有无数据String key = "cache:shop:" + id;String shopCache = stringRedisTemplate.opsForValue().get(key);if(StrUtil.isNotBlank(shopCache)){// 命中缓存return JSONUtil.toBean(shopCache, Shop.class);}// 解决缓存穿透问题 - shopCaache如果为“” 命中空缓存 如果为null 查询数据库if(shopCache != null){// 命中空缓存return null;}// 查询数据库Shop shop = getById(id);// 店铺不存在if(shop == null){// 将空值写入RedisstringRedisTemplate.opsForValue().set(key, "", RedisConstants.CACHE_NULL_TTL, TimeUnit.MINUTES);return null;}// 存储RedisstringRedisTemplate.opsForValue().set(key, JSONUtil.toJsonStr(shop), RedisConstants.CACHE_SHOP_TTL, TimeUnit.MINUTES);return shop;}
2.2.2 布隆过滤器

布隆过滤器俺不会~~~

我只知道他是根据一个算法算出来数据库有没有存储该key对应数据,但是放行可能也没数据。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/726442.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

“首件检验”为什么至关重要?(内附流程规范)

在产品的设计及生产过程中,经常会出现设计变更、工艺变更、制程调整、非计划停线及转产、转线等“变化”。 如何确保这些“变化”不影响产品后续的生产品质?这就需要在作业准备验证、停产后验证阶段,进行不能缺少的重要环节——“首件检验”。…

ruoyi-vue框架密码加密传输

先看一下改造后的样子,输入的密码不会再以明文展示。 下面我主要把前后端改造的代码贴出来。 1.后端代码 RsaUtils类 在com.ruoyi.common.utils包下新建RsaUtils类,RsaUtils添加了Component注解 generateKeyPair()构建密钥对添加了Bean注解 在项目启动…

大语言模型系列-GPT-2

文章目录 前言一、GPT-2做的改进二、GPT-2的表现总结 前言 《Language Models are Unsupervised Multitask Learners,2019》 前文提到,GPT-1利用不同的模型结构微调初步解决了多任务学习的问题,但是仍然是预训练微调的形式,GPT-…

【Spring高级】第2讲:容器实现类

目录 BeanFactory实现BeanDefinition后置处理器单例bean创建后置处理器顺序总结 ApplicationContext实现ClassPathXmlApplicationContextFileSystemXmlApplicationContextAnnotationConfigApplicationContextAnnotationConfigServletWebServerApplicationContext BeanFactory实…

linux常用指令(定期更新)

linux常用指令 1.页相关页大小 2.系统参数3.启动参数4.网络参数查询网卡所属numa节点信息网络测速相关iperf测试sar监控网卡流量查看网卡txqueuelen和mtu抓包tcpdump 网络数据收发状态snmp协议栈netstat -i所有网口TX-OK、RX-OKnetstat-s查看各个协议的收发数据ethtool -S单个网…

Ubuntu环境配置-LinuxQQ篇

本教程下载Linux QQ的版本是linuxqq_3.0.0-571_amd64.deb 一、下载LinuxQQ 直接使用wget命令下载链接,下载文件 wget https://dldir1.qq.com/qqfile/qq/QQNT/c005c911/linuxqq_3.0.0-571_amd64.deb 二、安装LinuxQQ 当下载完成后,运行命令:…

强化学习中的alpha和gamma分别代表什么

在强化学习中,alpha(α)和gamma(γ)分别代表学习率和折扣因子,它们是强化学习算法中的两个重要的超参数。 学习率 (alpha): alpha 是一个控制在学习过程中对新观测值的权重的参数。它决定了在更…

图像锐化-拉普拉斯算子 Sobel算子

算子解释 广义的讲,对任何函数进行某一项操作都可以认为是一个算子,甚至包括求幂次,开方都可以认为是一个算子,只是有的算子我们用了一个符号来代替他所要进行的运算罢了,所以大家看到算子就不要纠结,他和f…

Sentinel 规则持久化,基于Redis持久化【附带源码】

B站视频讲解 学习链接🔗 文章目录 一、理论二、实践2-1、dashboard 请求Redis2-1-1、依赖、配置文件引入2-1-2、常量定义2-1-3、改写唯一id2-1-4、新Provider和Publisher2-1-5、改写V2 2-2、应用服务改造2-2-1、依赖、配置文件引入2-2-2、注册监听器 三、源码获取3…

数组存储表格数据

表格是计算机世界最普遍的模型,互联网上看到的所有数据本质上都是“表格”。 ID姓名年龄职能入职日期1001小明18讲师2-141002小红19助教10-101003小亮20班主任5-5 使用二维数组保存表格数据: import java.util.Arrays;public class Test{public stati…

Talk|加州大学圣地亚哥分校程旭欣:视觉反馈下足式机器人的全身操作与运动

本期为TechBeat人工智能社区第576期线上Talk。 北京时间3月6日(周三)20:00,加州大学圣地亚哥分校博士生—程旭欣的Talk已准时在TechBeat人工智能社区开播! 他与大家分享的主题是: “视觉反馈下足式机器人的全身操作与运动”,向大家系统地介绍…

智能驾驶规划控制理论学习07-规划算法整体框架

一、解耦合策略 1、路径-速度解耦策略概述 路径-速度解耦指的是将车辆的运动分成路径规划和速度规划两部分,对两个部分分别进行研究。 路径规划: 假设环境是“静态的”,将障碍物投射到参考路径上,并规划一条避开它们的路径&…

【C语言】linux内核napi_gro_receive和netif_napi_add

napi_gro_receive 一、注释 // napi_gro_receive是网络设备接口的一个函数,它被NAPI(New API)网络轮询机制使用,用于接收和处理接收到的数据包。 // 这个函数通过通用接收分组(GRO,Generic Receive Offlo…

记录:DPDK 22.11.2 LTS在WSL/2 Ubuntu 18.04 LTS上面编译

DPDK 下载: https://core.dpdk.org/download/ DPDK 文档: https://core.dpdk.org/doc/quick-start/ 1、下载 DPDK 发行版本源代码,最好先找到 LTS 版本(即长期支援版本) 本文编译DPDK版本为:DPDK 22.11.2…

uviewplus在uniapp中的配置使用

版本: "uview-plus": "^3.1.45"在page.json中配置: "easycom": {"autoscan": true,"custom": {"^u--(.*)": "uview-plus/components/u-$1/u-$1.vue","^up-(.*)": "uview-plus/componen…

Ubuntu安装conda以后,给jupyter安装C++内核

前言 大家都知道,jupyter notebook 可以支持python环境,可以在不断点调试的情况下,打印出当前结果,如果代码错了也不影响前面的内容。于是我就想有没有C环境的,结果还真有。 参考文章: 【分享】Ubuntu安装…

探秘分布式神器RMI:原理、应用与前景分析(一)

本系列文章简介: 本系列文章将深入探究RMI远程调用的原理、应用及未来的发展趋势。首先,我们会详细介绍RMI的工作原理和基本流程,解析其在分布式系统中的核心技术。随后,我们将探讨RMI在各个领域的应用,包括分布式计算…

libigl 网格harmonic变形

文章目录 一、简介二、实现代码三、实现效果参考资料一、简介 与网格harmonic参数化有些类似,只不过网格harmonic变形的目标是通过调和映射(harmonic mapping)将一个网格变形到给定的目标形状上。在保持拉普拉斯-贝尔特拉米算子的特征的情况下,将网格上的顶点映射到目标形状…

【金三银四的季节看下Java ORM的走向和性能对比】总结

写在最后 经过将近一周时间的框架收集、学习、实验、编码、测试市面上常见的ORM框架,过程中拜读了很多作者的博文、样例,学习很多收获很多。 重新梳理下整理的框架:mybatis-plus、lazy、sqltoy、mybatis-flex、easy-query、mybatis-mp、jpa、…

什么是工业交换机?

如今,工业交换机在能源、环保、交通、智慧城市监控等各个行业都发挥着至关重要的作用,其需求也日益增长。本文将全面介绍工业交换机,帮助你进一步加深了解。 什么是工业交换机? 工业交换机,又称工业以太网交换机&…