Redis 管道详解

Redis 管道

关键词:Pipeline

Pipeline 简介

Redis 是一种基于 C/S 模型以及请求/响应协议的 TCP 服务。通常情况下,一个 Redis 命令的请求、响应遵循以下步骤:

  • 客户端向服务端发送一个查询请求,并监听 Socket 返回(通常是以阻塞模式,等待服务端响应)。
  • 服务端处理命令,并将结果返回给客户端。

显然,如果每个 Redis 命令都发起一次请求、响应,会很低效。因此,Redis 客户端提供了一种批量处理技术,即管道技术(Pipeline)。Pipeline 的工作原理就是:将多个 Redis 命令一次性发送给服务端,服务端处理后,统一返回给客户端。由于减少了通信次数,自然提升了处理效率。
在这里插入图片描述

Pipeline 限制

在使用 Redis 管道技术时,要注意一些限制,避免踩坑:

  • Pipeline 不能保证原子性 - Pipeline 只是将客户端发送命令的方式改为批量发送,而服务端在接收到 Pipeline 发来的命令后,将其拆解为一条条命令,然后依然是串行执行。执行过程中,服务端有可能执行其他客户端的命令,所以无法保证原子性。如需保证原子性,可以考虑使用事务或 Lua 脚本。
  • Pipeline 不支持回滚 - Pipeline 没有事务的特性,如果待执行命令的前后存在依赖关系,请勿使用 Pipeline。
  • Pipeline 命令不宜过大 - 使用管道发送命令时,Redis Server 会将部分请求放到缓存队列中(占用内存),执行完毕后一次性发送结果。如果需要发送大量的命令,会占用大量的内存,因此应该按照合理数量分批次的处理。
  • Pipeline 不支持跨 slot 访问 - 由于 Pipeline 不支持跨 slot 访问,因此,在 Redis 集群模式下使用 Pipeline 时要确保访问的 key 都在同一 slot 中。

Pipeline 案例

主流的 Redis 客户端,一般都会支持管道技术。

【示例】Jedis 管道使用示例

public class Demo {public static void main(String[] args) {String host = "localhost";int port = 6379;Jedis jedis = new Jedis(host, port);String key = "pipeline:test";jedis.del(key);// -------- 方法1method1(jedis, key);//-------- 方法2method2(jedis, key);}private static void method2(Jedis jedis, String key) {System.out.println("-----方法2-----");jedis.del(key);//初始化Pipeline pipeline = jedis.pipelined();//需要先声明ResponseResponse<Long> r1 = pipeline.incr(key);System.out.println("Pipeline发送请求");Response<Long> r2 = pipeline.incr(key);System.out.println("Pipeline发送请求");Response<Long> r3 = pipeline.incr(key);System.out.println("Pipeline发送请求");Response<Long> r4 = pipeline.incr(key);System.out.println("Pipeline发送请求");Response<Long> r5 = pipeline.incr(key);System.out.println("Pipeline发送请求");try {// 此时还未开始接收响应,所以此操作会出错r1.get();} catch (Exception e) {System.out.println(" <<< Pipeline error:还未开始接收响应  >>> ");}// 发送请求完成,开始接收响应System.out.println("发送请求完成,开始接收响应");pipeline.sync();System.out.println("Pipeline 接收响应 Response: " + r1.get());System.out.println("Pipeline 接收响应 Response: " + r2.get());System.out.println("Pipeline 接收响应 Response: " + r3.get());System.out.println("Pipeline 接收响应 Response: " + r4.get());System.out.println("Pipeline 接收响应 Response: " + r5.get());jedis.close();}private static void method1(Jedis jedis, String key) {Pipeline pipeline = jedis.pipelined();System.out.println("-----方法1-----");for (int i = 0; i < 5; i++) {pipeline.incr(key);System.out.println("Pipeline 发送请求");}// 发送请求完成,开始接收响应System.out.println("发送请求完成,开始接收响应");List<Object> responses = pipeline.syncAndReturnAll();if (responses == null || responses.isEmpty()) {jedis.close();throw new RuntimeException("Pipeline error: 没有接收到响应");}for (Object resp : responses) {System.out.println("Pipeline 接收响应 Response: " + resp.toString());}System.out.println();}}

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/705693.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

List根据实体类中某一字段进行去重

List根据实体类中某一字段进行去重 1、使用 toMap 收集器 利用 Collectors.toMap 收集器将流中的元素映射为一个 Map&#xff0c;其中键为 OmsOrderId&#xff0c;值为元素本身。如果存在相同的键&#xff08;即相同的 OmsOrderId&#xff09;&#xff0c;则使用 (existing, r…

美创科技荣获“2023年网络安全国家标准优秀实践案例”

近日&#xff0c;全国网络安全标准化技术委员会正式公布2023年网络安全国家标准优秀实践案例获奖名单。 杭州美创科技股份有限公司&#xff08;以下简称&#xff1a;美创科技&#xff09;申报的“GB/T 20281-2020《信息安全技术 防火墙安全技术要求和测试评价方法》在政企领域数…

【监督学习之支持向量机(SVM)】

曾梦想执剑走天涯&#xff0c;我是程序猿【AK】 目录 简述概要知识图谱基本原理支持向量线性SVM与非线性SVM优化问题软间隔与正则化SVM的应用实现 简述概要 了解监督学习-支持向量机&#xff08;SVM&#xff09; 知识图谱 支持向量机&#xff08;Support Vector Machine&…

visual stdio 使用ATL简单使用COM组件

先试用visual stdio创建ATL项目 选择第一个创建ATL简单对象 ProgId也需要添加一下&#xff0c;默认创建完之后添加方法 STDMETHODIMP AddNumber(LONG __num, LONG* result);添加定义 STDMETHODIMP_(HRESULT __stdcall) CATLSimpleObject::AddNumber(LONG __num, LONG* r…

LASSO算法

LASSO (Least Absolute Shrinkage and Selection Operator) 是一种回归分析的方法&#xff0c;它能够同时进行变量选择和正则化&#xff0c;以增强预测准确性和模型的解释性。LASSO通过在损失函数中加入一个L1惩罚项来实现这一点。该惩罚项对系数的绝对值进行约束。 基本概念 …

【深度学习笔记】深度卷积神经网络——AlexNet

深度卷积神经网络&#xff08;AlexNet&#xff09; 在LeNet提出后&#xff0c;卷积神经网络在计算机视觉和机器学习领域中很有名气。但卷积神经网络并没有主导这些领域。这是因为虽然LeNet在小数据集上取得了很好的效果&#xff0c;但是在更大、更真实的数据集上训练卷积神经网…

Linux 学习笔记(1-3)

一、 常用命令 LINUX 常用操作命令和命令行编辑快捷键 终端快捷键&#xff1a; Ctrl a/Home 切换到命令行开始 Ctrl e/End 切换到命令行末尾 Ctrl l 清除屏幕内容&#xff0c;效果等同于 clear Ctrl u 清除剪切光标之前的内容 Ctrl k 剪切清除光标之后的内容…

数学建模论文、代码百度网盘链接

1.[2018中国大数据年终总决赛冠军] 金融市场板块划分与轮动规律挖掘与可视化问题 2.[2019第九届MathorCup数模二等奖] 数据驱动的城市轨道交通网络优化策略 3.[2019电工杯一等奖] 露天停车场停车位的优化设计 4.[2019数学中国网络数模一等奖] 基于机器学习的保险业数字化变革…

后端分布式系统:提高可靠性和可伸缩性的架构

在当今的数字时代&#xff0c;随着用户数量和数据量的不断增长&#xff0c;传统的集中式系统已经难以满足企业的需求。为了解决这些挑战&#xff0c;后端分布式系统应运而生。这种架构将系统的不同组件分布在多个计算机上&#xff0c;通过网络进行通信和协调&#xff0c;从而提…

深度强化学习(DRL)算法系列文章合集

1. 深度强化学习&#xff08;DRL&#xff09;算法 1 —— REINFORCE 2. 深度强化学习&#xff08;DRL&#xff09;算法 2 —— PPO 之 Clipped Surrogate Objective 篇 3. 深度强化学习&#xff08;DRL&#xff09;算法 2 —— PPO 之 GAE 篇 4. 深度强化学习&#xff08;DR…

K8s二进制安装部署

二进制搭建 Kubernetes v1.20 k8s集群master01&#xff1a;192.168.10.80 kube-apiserver kube-controller-manager kube-scheduler etcd k8s集群master02&#xff1a;192.168.10.20 k8s集群node01&#xff1a;192.168.10.18 kubelet kube-proxy docker k8s集群no…

关于timeline的详细解析

关于timeline的详细解析 初始化画布 在echarts中有一个组件叫timeline他与echart中的其他图表结合起来 能很好的展现一段时间内各种数据的变化趋势 接下来我将用官网案例去逐步展示一下关于timeline中的各种详细配置 首先我们创建好vue的组件结构先尝试一些简单的小demo看看…

示波器的学习

示波器是什么 示波器&#xff0c;“人”如其名&#xff0c;就是显示波形的机器&#xff0c;它还被誉为“电子工程师的眼睛”。它的核心功能就是为了把被测信号的实际波形显示在屏幕上&#xff0c;以供工程师查找定位问题或评估系统性能等等。主要用于电子、电气、通信等领域的…

k8s 声明式(yaml)资源管理及yaml文件解析

目录 声明式概念 用途 语法 资源配置清单管理命令 查看资源配置清单&#xff1a; 查看资源详细信息&#xff1a; 创建资源配置清单&#xff1a; 删除资源&#xff1a; 编辑资源配置&#xff1a; 更新资源配置清单&#xff1a; 解释资源配置清单 两种方式来修改 Kube…

Spark集群搭建的三种方式详解

国科大学习生活&#xff08;期末复习资料、课程大作业解析、学习文档等&#xff09;: 文章专栏&#xff08;点击跳转&#xff09; 大数据开发学习文档&#xff08;分布式文件系统的实现&#xff0c;大数据生态圈学习文档等&#xff09;: 文章专栏&#xff08;点击跳转&#xff…

如何统计数组中重复元素的数量并获取其他相关数据?

在JavaScript中&#xff0c;可以使用以下方法来统计数组中重复元素的数量并获取其他相关数据&#xff1a; function countDuplicates(array) {// 创建一个对象来存储每个knowledgeId的信息&#xff0c;包括重复数量和其他数据var counts {};// 遍历数组&#xff0c;计算每个k…

交叉编译qt到arm平台

使用pkg-config命令查看xxx包是否存在&#xff1a; pkg-config --print-errors xxx pkg-config的搜索路径可以通过环境变量PKG_CONFIG_PATH指定。需要在运行./configure 之前指定。 ./configure -release -qt-libjpeg -qt-libpng -qt-zlib -qt-pcre -xplatform linux-aarch64-…

Java单元测试 - mock静态方法

文章目录 1. mock 静态方法2. 升级 maven 依赖3. 示例 1. mock 静态方法 mockito 在 3.4.0 版本之后&#xff0c;开始支持 mock static method。 2. 升级 maven 依赖 <dependency><groupId>org.mockito</groupId><artifactId>mockito-core</artif…

.NET Core Web API介绍+优缺点

一.NET Core Web API介绍 似乎有一些拼写错误在您的问题中&#xff0c;我猜测您可能是想问关于“.NET Core Web API”的介绍。如果是这样的话&#xff0c;我将为您提供关于.NET Core Web API的基本介绍。 .NET Core Web API 是一种构建 HTTP 服务的框架&#xff0c;它是 ASP.N…

CG-0A 电子水尺可实现对水位数据的连续自动监测

CG-0A 电子水尺可实现对水位数据的连续自动监测产品概述 本产品是一种采用微处理器芯片为控制器&#xff0c;内置通讯电路的数字式水位传感器&#xff0c;具备高的可靠性及抗干扰性能。适用于江、河、湖、水库及蓄水池、水渠等处的水位测量使用。 本产品采用了生产工艺技术&…