Redis高级----五种数据结构及其底层实现

目前已更新系列:

当前:Redis高级---面试总结5种数据结构的底层实现

Redis高级----主从、哨兵、分片、脑裂原理-CSDN博客

Redis高级---面试总结内存过期策略及其淘汰策略

计算机网络--面试知识总结一

计算机网络-----面试知识总结二

计算机网络--面试总结三(Http与Https)

计算机网络--面试总结四(HTTP、RPC、WebSocket、SSE)-CSDN博客

知识积累之ThreadLocal---InheritableThreadLocal总结

并发编程之----线程池ThreadPoolExecutor,Excutors的使用及其工作原理

String

String是Redis中最常见的数据类型

其有三种编码格式

  • 1、其基本编码格式是RAW,是基于动态字符串(SDS)实现的,储存上限是512mb,如果字符个数大于44个时会采用该编码格式,会为其分配一个RedisObject16个字节的内存空间,然后再为其分配一个SDS的内存空间,之后通过RedisObject中的指针指向该SDS
  • 2、当字符串的字符个数小于等于44个时会采用EMBSTR的编码方式,此时object head于SDS是一段连续的空间。这是因为字符数小于44个的话,RedisObject对象头+SDS的总的内存大小就小于64字节,刚好符合Redis的分片大小,将二者变为连续的空间好处就是在为该String申请空间时就只用申请一次,减小内核态线程的切换
  • 3、当需要储存的字符串是整数类型是,并且大小在Long_MAX范围内,就会采用INT编码格式,即直接将数据保存在RedisObject的ptr指针位置(刚好8个字节),就不再需要SDS了

List

底层结构:在redis3.2之前list的实现主要使用了LinkecList和ZipList来使用的,当数据量数据量小于512个或者大小小于64字节的时候使用的是ZipList,当数据量较大的时候使用的使用LinkedList来进行储存,因为ZipList底层使用的数组来模拟的双向链表的形式。需要连续的空间,申请代价较大

在3.2后引入QuickList后就解决了该问题,所以在3.2后List使用QuickList来作为为他的底层实现

Set

Set是Redis中的单列结合,其特点是

  • 不保证元素的有序性
  • 保证元素的唯一性(可以判断元素是否存在)
  • 可以求交集、并集、差集

要想实现Set的这些特点,那么对查询的效率的要求就比较高

因此我们可以使用HashTable,也就是Redis中的Dict,不过是Dict双列集合(可以存键、值对)

  • 为了查询效率和一致性,set采用HT编码(Dict),只是在将Dict中的key来存储元素,value统一为Null,类似于我们java中hashset的实现,底层也是只是用hashmap的key来存储值,value统一为Null
  • 当存储的数据都是整数的时候,并且元素数量不超过set-max-intsett-entries时,Set会采用IntSet编码,来节省内存

注意如果一开始set创建时使用的是intset作为底层的数据结构(即一开始初始化时储存的值是整形),那么当我们要存储字符串时,这是后就会将其底层的类型进行改变,改编成使用Dict类型

结构如下

Zset

ZSet就是SortedSet,其中每一个元素都需要指定一个score值和member值,根据socre进行排序,同时需要确定member值得唯一性

特点

  • 根据score值排序
  • member必须唯一
  • 可以根据member查询分数

那么根据上面的特点即键唯一,然后能通过键值找到value,同时能按照score排序

  • dict:满足key-value形式
  • skipList满足排序要求

使用这种方式进行存储,查询的效率非常高,但是可能看到,由于它使用了两种数据结构来存储,分别完成排序和key-value得形式,使得内存的暂用非常大,

因此在数据量不大时,HT(hashTable)和SkipList得优势就不明显了,而且更加的消耗内存,因此zset还会使用ZipList节省内存,不过需要满足两个条件

  • 元素个数小于zset_max_ziplist_entries,默认值是128
  • 每个元素都小于zset_max_ziplist_value字节,默认64字节

如果使用的时ziplist数据结构来进行存储,那么怎么实现根据score找meberm,和排序得功能?

Redis做了如下处理

  • ZipList是连续内存,因此score和element是紧凑在一起的两个entry,element在前,score在后
  • score越小越接近队首,score越大越接近队尾,按照score升序排列

Hash

特点需求

  • 都是通过键值存储
  • 根据键获取值
  • 键必须唯一

需求和ZSet差不多,只是少了排序的功能,因此它的实现可以参照ZSet的底层实现只需要将ZSet部分的SkicpList去掉

  • Hash结构默认使用的是ZipList编码,用于节省内存,ZipList中相邻的两个entry分别存放hash中的field和value
  • 当数据量比较大时,Hash结构会转化为HT(Dict)编码,触发条件有两个
    • 当ZipList中的元素个数大于hash_max_ziplist_entried(默认512个)
    • 当ZipList中的任意entry大小超过了hash_max_ziplist_value(默认64字节)

我靠在这里纠结半天怎么通过key找到field再找value,结果搞忘了,在调用HSetc操作时本来就是没有该key时就创建一个ziplist数据结构,每一个key对应一个压缩列表,然后再从压缩列表中通过filed找到value,傻了

redisDb结构的dict字典保存了数据库中的所有键值对,称为键空间(key space)。所有针对数据库的操作(增删改查),都是操作这个键空间。

注意:这里Redis系列的内容都是之前通过黑马的Redis教程进行学习的,如果不理解或者想理解更加详细可前往小破站学习

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/web/52159.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

初始MYSQL数据库(2)——创建、查询、更新、删除数据表的相关操作

找往期文章包括但不限于本期文章中不懂的知识点: 个人主页:我要学编程(ಥ_ಥ)-CSDN博客 所属专栏: MYSQL 前面我们学习了创建、删除数据库以及创建、查看、删除数据表的相关操作。 我们知道数据库中所存储的数据其实就是数据表中一条一条的记…

前端技术(六)—— AJAX详解

一、原生 AJAX 1. AJAX 简介 AJAX 全称为 Asynchronous JavaScript And XML,就是异步的 JS 和 XML。 通过 AJAX 可以在浏览器中向服务器发送异步请求,最大的优势:无刷新获取数据。 AJAX 不是新的编程语言,而是一种将现有的标准组…

MySQL 数据库管理与操作指南

文章目录 MySQL 数据库管理与操作指南1. 忘记 MySQL 密码的处理方法2. MySQL 数据库备份与恢复2.1 数据库备份2.2 数据库恢复 3. MySQL 用户与权限管理3.1 创建用户与授权3.2 查看所有用户3.3 删除用户 4. 关闭 GTID 复制模式5. 查看数据表的存储引擎5.1 查看 MySQL 支持的存储…

大语言模型(LLM)如何更好地继续预训练(Continue PreTraining)

预训练(Pretraining)是一个非常消耗资源的工作,尤其在 LLM 时代。随着LLama2的开源,越来越多人都开始尝试在这个强大的英文基座模型上进行中文增强。但,我们如何才能保证模型在既学到「中文知识」的情况下,…

【spring】 Jackson :@JsonIgnore 注解

@JsonIgnore 是 Jackson 库中的一个注解,用于在序列化和反序列化过程中忽略某个字段。也就是说,当对象被转换为 JSON 或从 JSON 转换为对象时,带有 @JsonIgnore 注解的字段将不会被包含在内在这个示例中,ignoredField 字段将不会出现在生成的 JSON 字符串中。 import com.…

灰光模块,彩光模块-介绍

1. 引用 知识分享系列一:5G基础知识-CSDN博客 5G前传的最新进展-CSDN博客 灰光和彩光_通信行业5G招标系列点评之二:一文读懂5G前传-光纤、灰光、彩光、CWDM、LWDM、MWDM...-CSDN博客 ADOP带你了解:CWDM、DWDM、MWDM、LWDM:快速…

网络编程day03(网络体系结构、调试命令、TCP/IP对比)

目录 1》网络的体系结构 1> OSI模型 2> TCP/IP模型 3> 常见网络协议 4> DNS域名解析协议 2》 网络调试命令 1> ping:测试网络连通性(ICMP) 2> netstat 3》Dos (拒绝式服务)攻击?…

【大模型-RAG】RAG最佳实践论文及项目解读

文章目录 论文概述RAG工作流程核心代码解读软件架构查询引擎构建数据加载与索引创建微调嵌入模型 项目应用结论 在人工智能领域,大型语言模型(LLMs)因其强大的文本生成能力而备受关注。然而,这些模型在生成信息时可能会产生过时的…

HTML和HTML5有什么区别

HTML(超文本标记语言)是构建网页的基础,而HTML5是HTML的最新版本。虽然HTML和HTML5在许多方面相似,但HTML5引入了许多新的特性和改进,使得网页开发更加高效和功能丰富。 一、HTML概述 HTML,即超文本标记语…

分布式锁的实现:ZooKeeper 的解决方案

在分布式系统中,不同的服务或进程需要访问共享资源时,常常需要一种机制来确保在同一时刻只有一个服务或进程能够访问资源。这种机制被称为分布式锁。ZooKeeper,一个为分布式应用提供一致性服务的开源协调服务,提供了一种实现分布式…

Django 测试指南

#Django 测试指南 对绝大部分人来说,测试Django应用感觉很神秘,他们只是听说代码必须要测试,但是经常找不到线索如何入手。当他们看了Django的测试文档,他们找到深入的哪些功能是可用的,但是如果实现没有任何指导。 …

代码随想录:96. 不同的二叉搜索树

96. 不同的二叉搜索树 class Solution { public:int numTrees(int n) {int dp[30]{0};//由i个结点组成的二叉搜索树有多少种dp[0]1; for(int i1;i<n;i)for(int j0;j<i;j)//j表示根节点左子树有j个结点dp[i]dp[j]*dp[i-j-1];//对根节点左右子树结点数量遍历//数量有左子树…

什么是数据结构三要素?

目录 1.逻辑结构 2.数据的存储结构 3.数据的运算 1.逻辑结构 逻辑结构是指数据元素之间的逻辑关系&#xff0c;即从逻辑关系上描述数据。 它与数据的存储无关&#xff0c;是独立于计算机的。数据的逻辑结构非为线性结构和非线性结构&#xff0c;线性表是典型的线性结构&am…

ELK学习笔记——如何给Kibana新增用户和角色

Kibana新增用户和角色 首先用超管账号登录上Kibana&#xff0c;按照下面步骤操作 1、创建角色 按图操作 2、创建用户 按图操作 3、给用户分配角色 至此&#xff0c;角色和用户绑定成功&#xff1b; 最后&#xff0c;可以退出管理员账号&#xff0c;登录这个新…

【MATLAB】FIR滤波器的MATLAB实现

FIR滤波器的MATLAB实现 FIR滤波器的设计fir1函数fir2函数 与IIR滤波器相比&#xff0c;FIR滤波器既有其优势也有其局限性。FIR滤波器的主要优点包括&#xff1a; 精确的线性相位响应&#xff1b;永远保持稳定性&#xff1b;设计方法通常是线性的&#xff1b;在硬件实现中具有更…

Django学习实战篇二(适合略有基础的新手小白学习)(从0开发项目)

前言&#xff1a; 从这一章开始&#xff0c;我们来创建项目typeidea&#xff0c;我把它放到了GitHub上。强烈建议你也到GitHub上注册一个账号&#xff08;如果没有的话&#xff09;&#xff0c;然后创建这样的项目。当然&#xff0c;你也可以起一个属于自己的名称。这个项目就是…

Live800:以客户为中心,重塑服务标准

在快速迭代的商业环境中&#xff0c;企业若想持续繁荣&#xff0c;就必须不断审视并优化自身的服务模式。传统上&#xff0c;服务往往被视为产品交易的附加品&#xff0c;但今日之市场&#xff0c;服务已悄然成为企业核心竞争力的关键要素。因此&#xff0c;“以客户为中心&…

Excel数据导入MySQL数据库的完整指南

在日常的数据处理工作中&#xff0c;经常需要将Excel中的数据导入到MySQL数据库中&#xff0c;以便进行进一步的数据分析和管理。本文将详细介绍如何将Excel数据导入MySQL数据库的完整步骤&#xff0c;包括数据准备、数据库连接、数据导入以及验证等关键步骤。 一、准备工作 …

PostgreSQL 17即将发布,新功能Top 3

按照计划&#xff0c;PostgreSQL 17 即将在 2024 年 9 月 26 日发布&#xff0c;目前已经发布了第一个 RC 版本&#xff0c;新版本的功能增强可以参考 Release Notes。 本文给大家分享其中 3 个重大的新增功能。 MERGE 语句增强 MERGE 语句是 PostgreSQL 15 增加的一个新功能…

5、Django Admin后台移除“删除所选”操作

默认情况下&#xff0c;Django Admin后台的listview模型列表页&#xff0c;会有一个Delete Selected删除所选操作。假设你需要再从Hero管理模型中移除该删除操作。 ModelAdmin.get_actions方法可以返回所有的操作方法。通过覆盖此方法&#xff0c;移除其中delete_selected方法…