Redis的缓存穿透?缓存击穿?缓存雪崩?

缓存穿透

什么是缓存穿透?

假如我们有一个学生表一共有10条数据,对应的id为1-10。我们有一个请求是通过id去查询学生的信息。正常的流程是请求先到redis里面去找,如果命中就将查询到的结果反回,如果没有就去mysql数据库中找,并将结果返回,同时存到redis当中。但是如果我们请求查询一个数据库中不存在的id,那么每次mysql数据库查询不到数据,也不会存入redis中,就会导致每次查询这样不存在的数据都会直接查找数据库。黑客可以运用这一点,发送大量不存在数据的请求,来对我们进行攻击。

解决缓存穿透的方法

  1. 方案1:缓存空数据,及时查询结果为null,也将这个结果存入redis
  • 优点:操作简单
  • 缺点:消耗内存,如果mysql数据库中新插入了所对应的数据,但是redis中存储的可能仍是null,会导致不一致问题。
  1. 方案2:布隆过滤器

在缓存预热阶段,预热布隆过滤器,在请求去redis中查询之前,现在布隆过滤器中进行查询所要查询的id是否存在于布隆过滤器中,如果不存在直接返回,如果存在再去redis中进行查询。(布隆过滤器的实现依赖于bitmap,是一个以bit为单位的数组,只能存储0/1,比如我们把id=1,存储到布隆存储器中,需要经过3个hash函数的计算,让某些下标为1,那么查询某个id是否存在,就是将传过来的id用相同的函数计算,看看布隆过滤器中对应的位置是否都为1,但是存在误判率。比如经过函数三个函数计算,bitmap中下标 1 ,5 ,8 ,9 ,11 ,15被标记为1,这时传过来一个不存在的id,但是这个id通过三个哈希函数的计算,认为如果5,8,15,这三个下标位置为1就视为这个id存在,这样就造成了误判)

可通过Redisson或Guava去实现布隆过滤器。

  • 优点:内存占用较少
  • 缺点:实现复杂,可能存在误判。

缓存击穿

什么是缓存击穿

在redis中给某个key设置了过期时间,但是当redis过期的时候恰好有对这个key的大量请求发了过来,这些并发的请求可能会瞬间把数据库压垮。

在redis查询不到数据,会去数据库中查询然后再次在redis中记录,那么为什么还会把数据库压垮呢?

因为所要查询的数据可能是要联合很多张表去查询,就会消耗较长的时间,无法去快速写入到redis。

如何解决缓存击穿

方案1:互斥锁

在第一个访问的线程后发现缓存未命中,让他获取到锁,接着去查询数据库并重建缓存,在释放锁之后其他线程才能在缓存中获取数据。如果在线程1释放锁之前,有其他线程来查询该数据,就会获取互斥锁失败,休眠一会后再重试查询该数据。

特点
  • 强一致(每个线程查询到的数据保证都是一样的)
  • 性能差(在第一个获取到锁的线程释放锁之前,其他线程要休眠和重试查询,浪费性能)

方案2:逻辑过期

在redis中并不设置过期时间,而是在数据库中加入一个逻辑过期时间的字段。在查询缓存中发现逻辑过期时间已经过期,那么他就会获取一个互斥锁,并创建一个新的线程2,由这个线程去查询数据库并重建缓存数据,写入缓存后重置逻辑过期时间,然后释放锁。而线程1并不等待线程二去完成这些流程,在获取到互斥锁之后,线程1直接返回过期的数据。如果在线程二释放锁之前,又有其他线程去访问这条数据,那么也会返回过期数据。而线程2释放锁之后再有=线程访问该条数据,就会缓存命中,返回没有过期的数据。

特点
  • 高可用,性能优(不用像方法一那样让其他线程一直等待,而是直接返回过期的数据)
  • 但是不能保持数据的一致性(过期的数据可能和没有过期的数据不一致)

缓存雪崩

什么是缓存雪崩

缓存雪崩是指在同一时段大量的key失效/或者Redis服务器宕机,导致大量请求到达服务器,带来巨大的压力。

解决方案

  1. .给不同的Key的TTL添加随机值
  2. 利用Redis集群提高服务的可用性
  3. 给缓存业务增加降级限流策略(降级可作为系统的保底策略,适用于穿透、击穿、雪崩
  4. 给业务添加多级缓存

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/735901.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

chatgpt与人类有何不同?

ChatGPT和人类之间存在多个显著的差异。 首先,ChatGPT是一种基于人工智能技术的计算机程序,通过机器学习和自然语言处理等技术,从大量的数据中获取知识并生成语言输出。它主要依赖于算法和数据进行工作,能够迅速处理和检索信息&a…

OpenCV(六)——对于图片的算术运行、图片的叠加操作、多通道图像拆分为多个单通道图像

在OpenCV中,可以对于图片进行算法运算。我们知道,图像的本质其实就是矩阵,因此对于图像的算数运算本质上就是对于矩阵的算术运算。在OpenCV可以对图像进行算术运算的操作有加、减、乘、除等操作。 图像的加、减、乘、除操作 两张图像可以进…

微信小程序开发系列(二十六)·小程序运行机制(启动、前后台状态、挂起、销毁)和小程序更新机制

目录 1. 小程序运行机制 1.1 启动 1.2 前台和后台状态 1.3 挂起 1.4 销毁 2. 小程序更新机制 1. 小程序运行机制 1.1 启动 小程序启动可以分为两种情况,一种是冷启动,一种是热启动。 冷启动:如果用户首次打开,或小…

数据挖掘案例分析、经典案例、技术实现方案

1.数据挖掘案例分析 数据挖掘:是从大量数据中发现有用信息和模式的过程。 数据挖掘案例分析:是指通过对已有数据进行挖掘和分析,发现其中的模式和规律,并根据这些发现提出相应的解决方案和决策建议的过程。 以下是一些常见的数据…

03-快速上手RabbitMQ的5种消息模型

RabbitMQ RabbitMQ是基于Erlang语言开发的开源消息通信中间件,有几个常见概念 connections(连接): 将来publisher(消息的发送者)或者consumer(消息的接收者)都需要先与MQ建立连接 channel(通道): 建立连接后需要创建通道,生产者和消费者就是基于通道完成消息的发送和接收 ex…

_note_06

1.说一说函数的按地址传递和按值传递,他们的区别是什么? 函数的参数传递方式可以分为按地址传递(也称为按引用传递)和按值传递两种方式。按值传递是指将实际参数的值复制给形式参数,即在函数调用时,实际参数…

探索云原生数据库技术:构建高效可靠的云原生应用

数据库是应用开发中非常重要的组成部分,可以进行数据的存储和管理。随着企业业务向数字化、在线化和智能化的演进过程中,面对指数级递增的海量存储需求和挑战以及业务带来的更多的热点事件、突发流量的挑战,传统的数据库已经很难满足和响应快…

2023年终总结——跌跌撞撞不断修正

目录 一、回顾1.一月,鼓足信心的开始2.二月,焦躁不安3.三月,路还是要一步一步的走4.四月,平平淡淡的前行5.五月,轰轰烈烈的前行6.六月,看事情更底层透彻了7.七月,设计模式升华月8.八月&#xff…

04hive数仓内外部表复杂数据类型与分区分桶

hive内部表和外部表 默认为内部表,外部表的关键字 :external内部表:对应的文件夹就在默认路径下 /user/hive/warehouse/库名.db/外部表:数据文件在哪里都行,无须移动数据 # students.txt 1,Lucy,girl,23 2,Tom,boy,2…

Kafka的分区机制

Kafka的分区机制是其核心功能之一,旨在提高可扩展性和并行处理能力。下面概述了Kafka分区的基本概念和工作原理: Kafka分区基本概念 分区(Partition):Kafka中的主题(Topic)可以细分为多个分区…

政安晨:【深度学习处理实践】(五)—— 初识RNN-循环神经网络

RNN(循环神经网络)是一种在深度学习中常用的神经网络结构,用于处理序列数据。与传统的前馈神经网络不同,RNN通过引入循环连接在网络中保留了历史信息。 RNN中的每个神经元都有一个隐藏状态,它会根据当前输入和前一个时…

Java EE之wait和notify

一.多线程的执行顺序 由于多个线程执行是抢占式执行,就会导致顺序不同,同时就会导致出现问题,就比如俩个线程同时对同一个变量进行修改,我们难以预知执行顺序。 但在实际开发中,我们希望代码按一定的逻辑顺序执行&am…

计算机视觉——P2PNet基于点估计的人群计数原理与C++模型推理

简介 人群计数是计算机视觉领域的一个核心任务,旨在估算静止图像或视频帧中的行人数量。在过去几十年中,研究人员在这个领域投入了大量的精力,并在提高现有主流基准数据集性能方面取得了显著进展。然而,训练卷积神经网络需要大规…

matlab阶段学习笔记小节2

syms定义符号变量 求极限 第二题 第三题 limit(y,n,inf);求的的函数y关于自变量n在无穷处(inf)的极限 exp(2)即指数为2,底为e,也就是e^2 求导数 第一题 log(x)默认是以e为底的指数函数,也就是ln(x). 使用diff(f)对函数进行求…

算法-双指针、BFS与图论-1113. 红与黑

题目 思路 本题相当于问BFS中的当前点所在的区域连通块有多少个 Flood Fill算法 (可参考以下链接:洪水覆盖算法(Flood Fill):颜色填充-CSDN博客)本题用DFS实现Flood Fill算法DFS是否需要恢复现场:(重要&am…

新IDEA电脑环境设置

1.设置UTF-8 2.Maven 3.JRE选对

【漏洞复现】华三用户自助服务产品dynamiccontent.properties.xhtml接口处存在RCE漏洞

免责声明:文章来源互联网收集整理,请勿利用文章内的相关技术从事非法测试,由于传播、利用此文所提供的信息或者工具而造成的任何直接或者间接的后果及损失,均由使用者本人负责,所产生的一切不良后果与文章作者无关。该…

VUE+HBuilder的uniapp技术路线开发应用使用总结

使用总结 本来想做一个记录日常数据的应用,主要在Android端使用,后来发现在uniapp中使用sqllite数据库不是像原生中那样简单(所以当前准备去进行另一个路线,就是给我使用的电脑都安装一个portalble的服务端,用来记录数据&#xf…

java中使用rabbitmq

文章目录 前言一、引入和配置1.引入2.配置 二、使用1.队列2.发布/订阅2.1 fanout(广播)2.2 direct(Routing/路由)2.3 Topics(主题)2.4 Headers 总结 前言 mq常用于业务解耦、流量削峰和异步通信,rabbitmq是使用范围较广,比较稳定的一款开源产品,接下来我们使用springboot的sta…

角蜥优化算法 (Horned Lizard Optimization Algorithm ,HLOA)求解无人机路径优化

一、无人机路径规划模型介绍 无人机三维路径规划是指在三维空间中为无人机规划一条合理的飞行路径,使其能够安全、高效地完成任务。路径规划是无人机自主飞行的关键技术之一,它可以通过算法和模型来确定无人机的航迹,以避开障碍物、优化飞行时间和节省能量消耗。 二、算法介…