微服务——重复消费(幂等解决方案)

目录

    • 一、唯一ID机制
    • 二、幂等性设计
    • 三、状态检查机制
    • 四、利用缓存和消息队列
    • 五、分布式锁
    • 总结

在微服务中,防止重复消费的核心思想是通过设计使得操作一次与多次产生相同的效果,并为每次操作生成唯一的ID。这样,即使在消息被重复发送的情况下,系统也能通过检查ID来避免重复处理。

在这里插入图片描述

一、唯一ID机制

在微服务架构中,为每次操作生成唯一ID是防止重复消费的关键步骤。通过为每个操作分配一个唯一的标识符,系统可以在后续的处理中识别并排除重复的消息。这种唯一ID机制有助于确保不同操作之间的隔离性,从而避免潜在的冲突和数据不一致问题。

二、幂等性设计

幂等性是指一个操作无论执行多少次,其结果都相同。在微服务中,幂等性设计是防止重复消费的重要手段。通过实现幂等操作,即使消息被重复消费,也不会对系统产生负面影响。实现幂等性的方法包括记录操作状态、状态检查机制以及使用数据库唯一键约束等。

三、状态检查机制

在微服务中,状态检查机制是防止重复消费的关键环节。通过检查消息的状态,系统可以判断该消息是否已经被处理过。如果消息的状态表示已经被处理,则系统可以直接忽略该消息,避免重复处理。为了实现状态检查机制,可以使用数据库中的唯一键约束来记录已处理消息的关键信息。

四、利用缓存和消息队列

为了提高处理效率和减少资源浪费,可以利用Redis等缓存工具来存储已处理的消息ID。当系统接收到新的消息时,首先检查缓存中是否存在相同的ID。如果存在,则说明该消息已经被处理过,直接丢弃即可。此外,还可以利用消息队列的幂等性特性和去重机制来避免重复消费。通过设置合理的重试次数和策略,可以避免无限重试导致的资源浪费。

五、分布式锁

在微服务架构中,分布式锁是实现消息顺序消费和防止重复消费的有效手段。通过分布式锁机制,可以确保同一时间只有一个消费者处理消息。基于Redis的分布式锁和基于ZooKeeper的分布式锁是实现分布式锁的常见方式。这些锁机制可以在多个微服务实例之间实现协同工作,从而确保消息的正确处理和避免重复消费。

总结

最佳方案:setNX + 数据库唯一索引

设置一个10s(根据重复消费并发量周期考虑)的分布式锁(缓存查询效率高),用于处理短期的重复消息。
同时用数据库唯一索引进行一个兜底。

// messageId 可以是一个订单编号
public String processMessage(String messageId) {  // 定义一个Redisson的分布式锁对象  String lockName = "message:lock:" + messageId;  RLock lock = redissonClient.getLock(lockName);  // 最常见的使用方法 tryLock(long waitTime, long leaseTime, TimeUnit unit)  // 尝试加锁,上锁以后10秒自动解锁  // 等待时间内加锁成功,则立即返回true,否则立即返回false  boolean locked = false;  try {  locked = lock.tryLock(10, TimeUnit.SECONDS);if (locked) {  // 成功获取锁,处理消息  try {  // 查询数据库唯一id是否已经生成,true则返回,false则执行逻辑if (getId(messageId)) {return "成功";}执行业务逻辑,并生成数据库唯一id.......} catch (Exception e) {  // 处理异常,比如数据库的唯一性约束异常等  }  } else {  // 加锁失败说明已经有线程在处理return "成功";}  }}  

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/pingmian/32430.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

K8S - 实现statefulset 有状态service的灰度发布

什么是灰度发布 Canary Release 参考 理解 什么是 滚动更新,蓝绿部署,灰度发布 以及它们的区别 配置partition in updateStrategy/rollingUpdate 这次我为修改了 statefulset 的1个yaml file statefulsets/stateful-nginx-without-pvc.yaml: --- apiVe…

Android - 跳转到应用商店进行应用打分功能实现

2.将过滤出的这些应用商店展示给用户,如果没有安装任何相关应用商店则提示用户“暂无安装相关应用商店”。 3.用户点击了某应用商店之后,则跳转到该应用商店的APP详情页。 4.下面列出了比较核心的代码,可进行参考。 /** 过滤出已经安装的包…

不同交换机之间相同VLAN间主机通信

1、搭建网络拓扑 搭建拓扑,分配IP地址,划分vlan,分配端口 2、配置交换机 //进入全局配置模式 Switch>enable Switch#config terminal Enter configuration commands, one per line. End with CNTL/Z. Switch(config)#hostname SW1 …

ubuntu 20.04 访问csdn报错 Secure connection failed

打扰了,csdn服务器的问题,和源没关系,后面又重新测试了一下。刚好那一刻网站连上了。 暂时没有好办法,等待一段时间就连上了,改host似乎也不太行。 问题原因: 我一边更新源 sudo apt update & apt up…

OPENCV中0x00007FFE5F35F39C发生异常

原因:读取图片时已经为灰度图像,又进行了一次灰度处理cvtColor 解决方法:如上图所示,将cv::imread的第二个参数改为cv::IMREAD_COLOR;或者保留cv::IMREAD_GRAYSCALE,删去后面的cv::cvtColor

Sequelize入门及简单的增删改查

前言 学习一下NodeJS怎么使用Sequelize怎么查询数据库数据 一、Sequelize是什么? Sequelize 是一个基于 promise 的 Node.js ORM, 二、搭建项目 1.安装过程 npm i -g sequelize-cli //全局安装sequelize-clinpm i sequelize mysql2 //安装sequelize和mysql2…

System.Runtime, Version=6.0.0.0,生成的dll使用出现错误问题

解决: 1.unity左上角file点击选中build settings 点击player settings ,然后在player的window的other settings的configuration更改为 Framerwork 其实这个不换也可以的,我后面调试完,发现这个不是重点,下面第2点才是…

Python15 理解Python迭代器

1.Python中的迭代器 在Python中,迭代器是一种允许程序员遍历一个容器(特别是列表、元组、字典等集合类型)的对象,而不需要了解容器的内部结构。迭代器提供了一个统一的方法来逐一访问容器中的元素,这种机制称为迭代。…

使用自签名 TLS 将 Dremio 连接到 MinIO

Dremio 是一个开源的分布式分析引擎,为数据探索、转换和协作提供简单的自助服务界面。Dremio 的架构建立在 Apache Arrow(一种高性能列式内存格式)之上,并利用 Parquet 文件格式实现高效存储。有关 Dremio 的更多信息,…

应用占内存,应用太耗电。不如冻起来!

在安卓系统中,一些不常用的系统组件、进程或顽固应用可能会持续在后台运行,占用宝贵的内存资源,导致手机出现卡顿、续航减少等问题。今天我将向您推荐几款实用的应用冻结工具,它们能够帮助您冻结或隐藏这些不必要的应用&#xff0…

最新PHP仿猪八戒任务威客网整站源码/在线接任务网站源码

资源介绍 老规矩,截图为亲测,前后台显示正常,细节功能未测,有兴趣的自己下载。 PHP仿猪八戒整站源码下载,phpmysql环境。威客开源建站系统,其主要交易对象是以用户为主的技能、经验、时间和智慧型商品。经…

Vue81-独享路由守卫

一、 独享路由守卫的定义 当只有某个特定的路由需要做校验的时候,可以在改路由组件规则的地方单独配置独属于改组件的路由守卫。 二、示例 1、需求 系统只在进入新闻路由页面的时候做校验。 2、代码实现 注意: 独享路由守卫,只有前置路由守…

高通安卓12-OTA 升级

1.OTA介绍 OTA 英文全称是 Over-the-Air Technology,即空间下载技术的意思。 OTA 升级是 Android 系统提供的标准软件升级方式。它功能强大,可以无损失升级系统,主 要通过网络[例如 WIFI、3G]自动下载 OTA 升级包、自动升级,但…

Windows11系统自动获取电脑IPV6地址,并且开机自动发送到指定邮箱

废话:最近放假回家,在家里突然想玩游戏了,Steamdeck性能终归有限。部分游戏始终玩的不爽,想到之前了解到的SunshnieMoonlight串流的方案,远程调用家里的电脑打游戏,简直不要太爽。 一顿折腾之后配置好了所有…

【职场人】“万事皆可”领导的职场囧途

故事单元一:无所不能的承诺 在我的公司里,有一位领导,我们戏称他为“万事皆可”先生。每当有新的任务或挑战出现时,他总是第一个站出来,拍着胸脯说:“没问题,交给我吧!”他的这种自…

一种微弱故障特征增强的旋转机械故障诊断方法(MATLAB)

导致轴承失效的根本原因是由异常磨损和局部间的机械冲击所导致的。对轴箱轴承日常运转的下所产生的均匀磨损而言,其振动信号特征与正常轴承振动信号大致一样,随机性较强,其概率密度函数呈现出高斯分布的现象,但由于磨损所导致的不…

37 - 上级经理已离职的公司员工(高频 SQL 50 题基础版)

37 - 上级经理已离职的公司员工 selecte1.employee_id fromEmployees e1 left join Employees e2 on e1.manager_id e2.employee_id wheree2.manager_id is null and e1.manager_id is not null and e1.salary<30000;

《计算机英语》 Unit 5 Networking 网络

Section A Networking 网络 The need to share information and resources among different computers has led to linked computer systems, called networks, in which computers are connected so that data can be transferred from machine to machine. 不同计算机之间共享…

什么是正态分布

最重要的连续分布的通用名是概率密度函数&#xff0c;而标准正态分布&#xff08;Standard Normal Distribution&#xff09; 是最重要的概率密度函数。这个连续分布之所以重要&#xff0c;我认为是因为它非常常见&#xff0c;换句话说&#xff0c;我们会很常用到它。标准正态分…

C++基础编程100题-012 OpenJudge-1.3-10 计算并联电阻的阻值

更多资源请关注纽扣编程微信公众号 http://noi.openjudge.cn/ch0103/09/ 描述 对于阻值为r1和r2的电阻&#xff0c;其并联电阻阻值公式计算如下&#xff1a; R 1/(1/r1 1/r2) 输入 两个电阻阻抗大小&#xff0c;浮点型&#xff0c;以一个空格分开。 输出 并联之后的阻…