分布式缓存与Redis

缓存定义与意义

  • 狭义缓存:加速CPU数据交换的存储器。
  • 广义缓存:所有用于数据高速交换的存储介质,包括硬件和软件。
  • 缓存目的:通过数据交换缓冲区减少原始数据获取代价,提高读写性能。

缓存思想与性能

  • 时间局限性原理:数据一旦被获取,未来可能被多次引用。
  • 以空间换时间:使用高速独立空间来提供数据的高效访问。
  • 性能成本权衡:访问延迟越低,性能越高,成本也越大。

缓存的优势与代价

  • 优势
    • 提升访问性能。
    • 降低网络拥堵。
    • 减轻服务负载。
    • 增强可扩展性。
  • 代价
    • 增加系统复杂度。
    • 增加部署和运行成本。
    • 存在数据一致性问题。

缓存读写模式

  1. Cache Aside(旁路缓存)
    • 写操作:更新数据库后删除缓存中的key。
    • 读操作:先读缓存,未命中则读数据库并回写缓存。
  2. Read/Write Through(读写穿透)
    • 业务应用通过存储服务与缓存和数据库交互。
    • 存储服务代理处理缓存和数据库的读写操作。
  3. Write Behind Caching(异步缓存写入)
    • 先更新缓存,异步批量更新数据库。
    • 写性能高,但可能数据一致性差,存在数据丢失风险。

缓存问题解决方案

  1. 缓存穿透
    • 频繁查询不存在的数据。
    • 解决方案:接口校验、缓存空对象、布隆过滤器。
  2. 缓存击穿
    • 热点Key过期导致大量请求访问数据库。
    • 解决方案:永不过期、逻辑过期、使用互斥锁。
  3. 缓存雪崩
    • 大量缓存key同时失效或服务宕机。
    • 解决方案:随机过期时间、集群部署、多级缓存、降级限流。

缓存数据不一致和并发竞争

  • 数据不一致
    • 原因:更新数据库后缓存更新失败。
    • 解决方案:重试更新、使用队列服务、缓存分层策略。
  • 数据并发竞争
    • 原因:缓存miss导致大量请求并发查询数据库。
    • 解决方案:全局锁、多个缓存备份。

Hot Key和Big Key问题

  • Hot Key
    • 原因:突发热门事件导致大量请求。
    • 解决方案:识别热key、分散缓存节点、多副本架构、监控SLA、本地缓存。
  • Big Key
    • 原因:缓存Value过大导致读写超时。
    • 解决方案:启用压缩、预先分配足够空间、序列化构建、分拆大key。

Redis网络模型

  • 用户空间与内核空间
    • 用户空间通过内核接口访问资源。
    • 内核空间直接调用系统资源。
  • Linux缓冲区
    • 用户空间和内核空间都加入缓冲区提高IO效率。
  • 网络模型
    • 阻塞IO:两个阶段都阻塞。
    • 非阻塞IO:第一阶段不阻塞,第二阶段阻塞。
    • IO多路复用:单个线程监听多个FD。
    • 信号驱动IO:通过信号通知用户进程FD就绪。
    • 异步IO:内核完成数据处理后写入用户态。

Redis多线程支持

  • Redis v4.0:引入多线程处理耗时任务。
  • Redis v6.0:在核心网络模型中引入多线程。

缓存设计架构考量点

  • 读写方式:整体读写或部分读写。
  • KV size:根据业务数据大小分拆或合并KV。
  • key数量:全量数据或只保留热数据。
  • 读写峰值:独立Cache池或分层处理。
  • 命中率:持续监控和故障处理。
  • 过期策略:设置合理过期时间或使用时间戳。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/877077.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

文件搜索工具FSearch

FSearch是一个开源的、类似于Everything的文件搜索工具,主要用于Linux系统上,搜索某个文件。先指定大概的目录位置,然后,输入文件名称,就可以自动搜索了。     这里介绍FSearch在Ubuntu上的安装方法,步骤…

Notepad

https://codeforces.com/contest/17/problem/D ​​​​​​​ 没有前导零 因此一共写个数字&#xff0c;再mod c 数据范围很大,因此我们魔改一下快读 再用扩展欧拉定理 #include<iostream> #include<cstdio> #include<cstring> using namespace std; ty…

JAVA里的多线程上部(详解)

1.实现多线程 1.1简单了解多线程【理解】 是指从软件或者硬件上实现多个线程并发执行的技术。 具有多线程能力的计算机因有硬件支持而能够在同一时间执行多个线程&#xff0c;提升性能。 1.2并发和并行【理解】 并行&#xff1a;在同一时刻&#xff0c;有多个指令在多个CPU上…

生成式人工智能的未来发展方向:Chat领域展现无限潜力

随着人工智能技术的不断进步&#xff0c;生成式人工智能开始在各个领域展现出令人瞩目的潜力。作为其中一项重要技术&#xff0c;Chat&#xff08;对话&#xff09;型的生成式人工智能引起了广泛的关注。在未来&#xff0c;Chat型生成式人工智能有望在多个方向上实现突破性进展…

华清IOday2 24-7-29

1> 写一个日志文件&#xff0c;将程序启动后&#xff0c;每一秒的时间写入到文件中 1、2024- 7-29 10:31:19 2、2024- 7-29 10:31:20 3、2024- 7-29 10:31:21 ctrlc:停止程序 ./a.out 4、2024- 7-29 10:35:06 5、2024- 7-29 10:35:07 6、2024- 7-29 10:35:08 main.c …

Laravel魔术方法:框架的隐秘力量

Laravel魔术方法&#xff1a;框架的隐秘力量 引言 Laravel是一个充满魔力的PHP框架&#xff0c;它通过许多巧妙的设计让Web开发变得简洁而优雅。在Laravel中&#xff0c;魔术方法&#xff08;Magic Methods&#xff09;是这些魔力的体现之一。魔术方法是PHP预定义的、可以在类…

缓存穿透,缓存击穿,缓存雪崩

目录 介绍 缓存穿透 缓存击穿 缓存雪崩 原因 影响 解决方案 缓存穿透 防止缓存穿透->空值缓存案例 缓存击穿 使用互斥锁解决缓存击穿 介绍 缓存穿透 定义&#xff1a;缓存穿透是指用户查询数据&#xff0c;缓存和数据库中都不存在该数据&#xff08;一般是发起恶意…

实战:ZooKeeper 操作命令和集群部署

ZooKeeper 操作命令 ZooKeeper的操作命令主要用于对ZooKeeper服务中的节点进行创建、查看、修改和删除等操作。以下是一些常用的ZooKeeper操作命令及其说明&#xff1a; 一、启动与连接 启动ZooKeeper服务器&#xff1a; ./zkServer.sh start这个命令用于启动ZooKeeper服务器…

403 forbidden (13: Permission denied)

403 forbidden (13: Permission denied) 目录 403 forbidden (13: Permission denied) 【常见模块错误】 【解决方案】 欢迎来到我的主页&#xff0c;我是博主英杰&#xff0c;211科班出身&#xff0c;就职于医疗科技公司&#xff0c;热衷分享知识&#xff0c;武汉城市开发者…

Laravel路由模型绑定:简化依赖注入的艺术

Laravel路由模型绑定&#xff1a;简化依赖注入的艺术 引言 在现代Web应用开发中&#xff0c;Laravel框架以其优雅和简洁的代码而闻名。Laravel的路由模型绑定&#xff08;Route Model Binding&#xff09;是框架提供的一项强大功能&#xff0c;它允许开发者在路由处理中自动注…

基于视觉的语义匹配见多了,那基于雷达的呢?

论文题目&#xff1a; LiDAR-based HD Map Localization using Semantic Generalized ICP with Road Marking Detection 论文作者&#xff1a; Yansong Gong, Xinglian Zhang, Jingyi Feng, Xiao He and Dan Zhang 作者单位&#xff1a;北京驭势科技有限公司 导读&#xff…

python 查询机器python、gpu、安装包等环境版本信息

checkenv.py """Check environment configurations and dependency versions."""import importlib import os import resource import subprocess import sys from collections import OrderedDict, defaultdictimport torch# 查询自己想要的包…

cf960(div2)

A. Submission Bait&#xff08;博弈&#xff09; 题意&#xff1a;爱丽丝和鲍勃在大小为n的数组a中进行游戏&#xff0c;他们轮流进行运算&#xff0c;爱丽丝先开始&#xff0c;不能运算的一方输&#xff0c;一开始mx0&#xff0c;每次操作&#xff0c;玩家可以选择一个牵引i…

MOMFEA-SADE--基于子空间对齐和自适应差分进化的多目标多任务优化算法

MOMFEA-SADE–基于子空间对齐和自适应差分进化的多目标多任务优化算法 title&#xff1a; Evolutionary Multitasking for Multiobjective Optimization With Subspace Alignment and Adaptive Differential Evolution author&#xff1a; Zhengping Liang, Hao Dong, Cheng …

c语言中的整形提升和算数转换

整形提升&#xff1a; 表达式中字符和短整型操作数在使用之前转换为普通整形 分为两种&#xff1a; 有符号整形提升&#xff1a;按照变量的数据类型的符号位来提升 无符号整形提升&#xff1a;按照高位补0的方式及进行提升 例如&#xff1a;char a20&#xff1b;char b130…

【Git】 如何将一个分支的某个提交合并到另一个分支

【Git】 如何将一个分支的某个提交合并到另一个分支 在使用 Git 进行版本控制时&#xff0c;常常会遇到这样的需求&#xff1a;将某个分支的特定提交合并到另一个分支中。这种情况下&#xff0c;我们可以使用 cherry-pick 命令来实现。本文将详细介绍 cherry-pick 命令的使用方…

Java基础巩固 -- 多线程

Java基础巩固 – 多线程 1.多线程 1.1 意义 Java 给多线程编程提供了内置的支持。 一条线程指的是进程中一个单一顺序的控制流&#xff0c;一个进程中可以并发多个线程&#xff0c;每条线程并行执行不同的任务。 多线程是多任务的一种特别的形式&#xff0c;但多线程使用了更…

“链动革新:2+1模式引领用户复购与留存潮流“

大家好&#xff01;我是吴军&#xff0c;来自一家在业界享有盛誉的软件开发公司&#xff0c;担任产品经理一职。今天&#xff0c;我想和大家深入探讨一个话题——如何利用创新的链动21模式来显著提升用户的留存率和复购率。 提到链动模式&#xff0c;很多人可能第一时间想到的是…

DEBUG:机械臂无法连接

问题 机械臂无法连接 ip 网关正确 解决 检查网口是否正常 网口损坏 usb部分可能半坏&#xff08;支持鼠标 不是转网口&#xff09;

Whisper离线部署问题处理

Whisper是OpenAI开发一款开源语音识别模型&#xff0c;可以帮我们低成本的拥有语音识别的能力。具体的安装部署方法&#xff0c;我在这里就不详细说了&#xff0c;网上有很多相关文章&#xff1a; 使用OpenAI的Whisper 模型进行语音识别 (baidu.com) 我这里主要想说的是&…