Redis高级----五种数据结构及其底层实现

目前已更新系列:

当前:Redis高级---面试总结5种数据结构的底层实现

Redis高级----主从、哨兵、分片、脑裂原理-CSDN博客

Redis高级---面试总结内存过期策略及其淘汰策略

计算机网络--面试知识总结一

计算机网络-----面试知识总结二

计算机网络--面试总结三(Http与Https)

计算机网络--面试总结四(HTTP、RPC、WebSocket、SSE)-CSDN博客

知识积累之ThreadLocal---InheritableThreadLocal总结

并发编程之----线程池ThreadPoolExecutor,Excutors的使用及其工作原理

String

String是Redis中最常见的数据类型

其有三种编码格式

  • 1、其基本编码格式是RAW,是基于动态字符串(SDS)实现的,储存上限是512mb,如果字符个数大于44个时会采用该编码格式,会为其分配一个RedisObject16个字节的内存空间,然后再为其分配一个SDS的内存空间,之后通过RedisObject中的指针指向该SDS
  • 2、当字符串的字符个数小于等于44个时会采用EMBSTR的编码方式,此时object head于SDS是一段连续的空间。这是因为字符数小于44个的话,RedisObject对象头+SDS的总的内存大小就小于64字节,刚好符合Redis的分片大小,将二者变为连续的空间好处就是在为该String申请空间时就只用申请一次,减小内核态线程的切换
  • 3、当需要储存的字符串是整数类型是,并且大小在Long_MAX范围内,就会采用INT编码格式,即直接将数据保存在RedisObject的ptr指针位置(刚好8个字节),就不再需要SDS了

List

底层结构:在redis3.2之前list的实现主要使用了LinkecList和ZipList来使用的,当数据量数据量小于512个或者大小小于64字节的时候使用的是ZipList,当数据量较大的时候使用的使用LinkedList来进行储存,因为ZipList底层使用的数组来模拟的双向链表的形式。需要连续的空间,申请代价较大

在3.2后引入QuickList后就解决了该问题,所以在3.2后List使用QuickList来作为为他的底层实现

Set

Set是Redis中的单列结合,其特点是

  • 不保证元素的有序性
  • 保证元素的唯一性(可以判断元素是否存在)
  • 可以求交集、并集、差集

要想实现Set的这些特点,那么对查询的效率的要求就比较高

因此我们可以使用HashTable,也就是Redis中的Dict,不过是Dict双列集合(可以存键、值对)

  • 为了查询效率和一致性,set采用HT编码(Dict),只是在将Dict中的key来存储元素,value统一为Null,类似于我们java中hashset的实现,底层也是只是用hashmap的key来存储值,value统一为Null
  • 当存储的数据都是整数的时候,并且元素数量不超过set-max-intsett-entries时,Set会采用IntSet编码,来节省内存

注意如果一开始set创建时使用的是intset作为底层的数据结构(即一开始初始化时储存的值是整形),那么当我们要存储字符串时,这是后就会将其底层的类型进行改变,改编成使用Dict类型

结构如下

Zset

ZSet就是SortedSet,其中每一个元素都需要指定一个score值和member值,根据socre进行排序,同时需要确定member值得唯一性

特点

  • 根据score值排序
  • member必须唯一
  • 可以根据member查询分数

那么根据上面的特点即键唯一,然后能通过键值找到value,同时能按照score排序

  • dict:满足key-value形式
  • skipList满足排序要求

使用这种方式进行存储,查询的效率非常高,但是可能看到,由于它使用了两种数据结构来存储,分别完成排序和key-value得形式,使得内存的暂用非常大,

因此在数据量不大时,HT(hashTable)和SkipList得优势就不明显了,而且更加的消耗内存,因此zset还会使用ZipList节省内存,不过需要满足两个条件

  • 元素个数小于zset_max_ziplist_entries,默认值是128
  • 每个元素都小于zset_max_ziplist_value字节,默认64字节

如果使用的时ziplist数据结构来进行存储,那么怎么实现根据score找meberm,和排序得功能?

Redis做了如下处理

  • ZipList是连续内存,因此score和element是紧凑在一起的两个entry,element在前,score在后
  • score越小越接近队首,score越大越接近队尾,按照score升序排列

Hash

特点需求

  • 都是通过键值存储
  • 根据键获取值
  • 键必须唯一

需求和ZSet差不多,只是少了排序的功能,因此它的实现可以参照ZSet的底层实现只需要将ZSet部分的SkicpList去掉

  • Hash结构默认使用的是ZipList编码,用于节省内存,ZipList中相邻的两个entry分别存放hash中的field和value
  • 当数据量比较大时,Hash结构会转化为HT(Dict)编码,触发条件有两个
    • 当ZipList中的元素个数大于hash_max_ziplist_entried(默认512个)
    • 当ZipList中的任意entry大小超过了hash_max_ziplist_value(默认64字节)

我靠在这里纠结半天怎么通过key找到field再找value,结果搞忘了,在调用HSetc操作时本来就是没有该key时就创建一个ziplist数据结构,每一个key对应一个压缩列表,然后再从压缩列表中通过filed找到value,傻了

redisDb结构的dict字典保存了数据库中的所有键值对,称为键空间(key space)。所有针对数据库的操作(增删改查),都是操作这个键空间。

注意:这里Redis系列的内容都是之前通过黑马的Redis教程进行学习的,如果不理解或者想理解更加详细可前往小破站学习

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/web/52159.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

初始MYSQL数据库(2)——创建、查询、更新、删除数据表的相关操作

找往期文章包括但不限于本期文章中不懂的知识点: 个人主页:我要学编程(ಥ_ಥ)-CSDN博客 所属专栏: MYSQL 前面我们学习了创建、删除数据库以及创建、查看、删除数据表的相关操作。 我们知道数据库中所存储的数据其实就是数据表中一条一条的记…

前端技术(六)—— AJAX详解

一、原生 AJAX 1. AJAX 简介 AJAX 全称为 Asynchronous JavaScript And XML,就是异步的 JS 和 XML。 通过 AJAX 可以在浏览器中向服务器发送异步请求,最大的优势:无刷新获取数据。 AJAX 不是新的编程语言,而是一种将现有的标准组…

大语言模型(LLM)如何更好地继续预训练(Continue PreTraining)

预训练(Pretraining)是一个非常消耗资源的工作,尤其在 LLM 时代。随着LLama2的开源,越来越多人都开始尝试在这个强大的英文基座模型上进行中文增强。但,我们如何才能保证模型在既学到「中文知识」的情况下,…

灰光模块,彩光模块-介绍

1. 引用 知识分享系列一:5G基础知识-CSDN博客 5G前传的最新进展-CSDN博客 灰光和彩光_通信行业5G招标系列点评之二:一文读懂5G前传-光纤、灰光、彩光、CWDM、LWDM、MWDM...-CSDN博客 ADOP带你了解:CWDM、DWDM、MWDM、LWDM:快速…

网络编程day03(网络体系结构、调试命令、TCP/IP对比)

目录 1》网络的体系结构 1> OSI模型 2> TCP/IP模型 3> 常见网络协议 4> DNS域名解析协议 2》 网络调试命令 1> ping:测试网络连通性(ICMP) 2> netstat 3》Dos (拒绝式服务)攻击?…

【大模型-RAG】RAG最佳实践论文及项目解读

文章目录 论文概述RAG工作流程核心代码解读软件架构查询引擎构建数据加载与索引创建微调嵌入模型 项目应用结论 在人工智能领域,大型语言模型(LLMs)因其强大的文本生成能力而备受关注。然而,这些模型在生成信息时可能会产生过时的…

代码随想录:96. 不同的二叉搜索树

96. 不同的二叉搜索树 class Solution { public:int numTrees(int n) {int dp[30]{0};//由i个结点组成的二叉搜索树有多少种dp[0]1; for(int i1;i<n;i)for(int j0;j<i;j)//j表示根节点左子树有j个结点dp[i]dp[j]*dp[i-j-1];//对根节点左右子树结点数量遍历//数量有左子树…

什么是数据结构三要素?

目录 1.逻辑结构 2.数据的存储结构 3.数据的运算 1.逻辑结构 逻辑结构是指数据元素之间的逻辑关系&#xff0c;即从逻辑关系上描述数据。 它与数据的存储无关&#xff0c;是独立于计算机的。数据的逻辑结构非为线性结构和非线性结构&#xff0c;线性表是典型的线性结构&am…

ELK学习笔记——如何给Kibana新增用户和角色

Kibana新增用户和角色 首先用超管账号登录上Kibana&#xff0c;按照下面步骤操作 1、创建角色 按图操作 2、创建用户 按图操作 3、给用户分配角色 至此&#xff0c;角色和用户绑定成功&#xff1b; 最后&#xff0c;可以退出管理员账号&#xff0c;登录这个新…

【MATLAB】FIR滤波器的MATLAB实现

FIR滤波器的MATLAB实现 FIR滤波器的设计fir1函数fir2函数 与IIR滤波器相比&#xff0c;FIR滤波器既有其优势也有其局限性。FIR滤波器的主要优点包括&#xff1a; 精确的线性相位响应&#xff1b;永远保持稳定性&#xff1b;设计方法通常是线性的&#xff1b;在硬件实现中具有更…

Django学习实战篇二(适合略有基础的新手小白学习)(从0开发项目)

前言&#xff1a; 从这一章开始&#xff0c;我们来创建项目typeidea&#xff0c;我把它放到了GitHub上。强烈建议你也到GitHub上注册一个账号&#xff08;如果没有的话&#xff09;&#xff0c;然后创建这样的项目。当然&#xff0c;你也可以起一个属于自己的名称。这个项目就是…

Live800:以客户为中心,重塑服务标准

在快速迭代的商业环境中&#xff0c;企业若想持续繁荣&#xff0c;就必须不断审视并优化自身的服务模式。传统上&#xff0c;服务往往被视为产品交易的附加品&#xff0c;但今日之市场&#xff0c;服务已悄然成为企业核心竞争力的关键要素。因此&#xff0c;“以客户为中心&…

5、Django Admin后台移除“删除所选”操作

默认情况下&#xff0c;Django Admin后台的listview模型列表页&#xff0c;会有一个Delete Selected删除所选操作。假设你需要再从Hero管理模型中移除该删除操作。 ModelAdmin.get_actions方法可以返回所有的操作方法。通过覆盖此方法&#xff0c;移除其中delete_selected方法…

美团面试:mysql 索引失效?怎么解决? (重点知识,建议收藏,读10遍+)

美团面试&#xff1a;mysql 索引失效&#xff1f;怎么解决&#xff1f; 尼恩说在前面 在40岁老架构师 尼恩的读者交流群(50)中&#xff0c;最近有小伙伴拿到了一线互联网企业如得物、阿里、滴滴、极兔、有赞、shein 希音、shopee、百度、网易的面试资格&#xff0c;遇到很多很…

MacTalk 测评通义灵码,如何实现“微信表情”小功能?

作者&#xff1a;池建强&#xff0c;墨问西东创始人 前段时间&#xff0c;我写了篇墨问研发团队放弃 GitHub Copilot 的文章&#xff0c;没想到留言区一些读者推荐我们试试通义灵码&#xff0c;说它效果很不错。我呢&#xff0c;一直没腾出时间折腾。 直到月中时&#xff0c;…

Java之线程篇一

目录 如何理解进程&#xff1f; 进程和线程的区别 线程的优点 线程的缺点 线程异常 线程用途 创建线程 方法一&#xff1a;继承Thread类&#xff0c;重写run() 观察线程 小结 方法二&#xff1a; 实现Runnable接口&#xff0c;重写run() 方法三&#xff1a;继承Threa…

k8s之HPA实践——实现Web服务器的自动伸缩特性

文章目录 在生产环境中&#xff0c;总会有一些意想不到的事情发生&#xff0c;比如公司网站流量突然升高&#xff0c;此时之前创建的Pod已不足以支撑所有的访问&#xff0c;而运维人员也不可能24小时守着业务服务&#xff0c;这时就可以通过配置HPA&#xff0c;实现负载过高的情…

AI时代来临,AI基础数据服务行业未来发展有哪些变化

AI基础数据服务是针对人工智能&#xff08;AI&#xff09;领域提供的一项服务&#xff0c;它包括数据采集、数据清洗、信息抽取和数据标注等服务。AI基础数据服务旨在为AI算法的训练和优化提供必要的数据支持&#xff0c;为AI算法的性能提供保障。 标贝科技提供专业的数据采集、…

写的一致性问题之双写模式

文章目录 1、先写mysql&#xff1a;mysql会回滚&#xff0c;而redis不会回滚2、先写redis&#xff1a; 1、先写mysql&#xff1a;mysql会回滚&#xff0c;而redis不会回滚 写入msql成功&#xff0c;写入redis也成功&#xff0c;但是后续事务提交失败&#xff0c;mysql会回滚&a…

自己开发完整项目一、登录功能-04(集成jwt)

一、说明 前面文章我们写到了通过数据库查询出用户信息并返回&#xff0c;那么在真实的项目中呢&#xff0c;后端是需要给前端返回一个tocken&#xff0c;当前端通过登录功能认证成功之后&#xff0c;我们后端需要将用户信息和权限整合成一个tocken返回给前端&#xff0c;当前端…