【Seata】分布式事务解决方案——理论

目录

  • 回顾
    • 什么是事务
    • 数据库事务的四大特性:ACID
  • 分布式事务
    • 解释
    • 面临挑战
    • 分布式事务产生场景
      • 1. 单体架构中多数据源场景
      • 2. 分布式架构场景
    • 分布式事务解决方案
      • jta + Atomikos
      • LCN模式
        • 问题
      • Alibaba的Seata解决分布式事务
        • 问题
      • 使用MQ解决分布式事务问题
        • 问题1:关于消息丢失问题(消息可靠性)
        • 问题2:事务回滚怎么处理

回顾

什么是事务

  • 事务可以看做是一次大的活动,它由不同的小活动组成,这些活动要么全部成功,要么全部失败。

数据库事务的四大特性:ACID

  • A(Atomic):原子性,构成事务的所有操作,要么都执行完成,要么全部不执行,不可能出现部分成功部分失败的情况。

  • C(Consistency):一致性,在事务执行前后,数据库的一致性约束没有被破坏。比如:张三向李四转 100 元,转账前和转账后的数据是正确状态这叫一致性,如果出现张三转出 100 元,李四账户没有增加 100 元这就出现了数 据错误,就没有达到一致性。

  • I(Isolation):隔离性,数据库中的事务一般都是并发的,隔离性是指并发的两个事务的执行互不干扰,一个事务不能看到其他事务的运行过程的中间状态。通过配置事务隔离级别可以比避免脏读、重复读问题。

  • D(Durability):持久性,事务完成之后,该事务对数据的更改会持久到数据库,且不会被回滚。

数据库事务在实现时会将一次事务的所有操作全部纳入到一个不可分割的执行单元,该执行单元的所有操作要么都成功,要么都失败,只要其中任一操作执行失败,都将导致整个事务的回滚。

分布式事务

解释

  • 分布式事务是指涉及多个独立数据库或资源的事务处理。
  • 在分布式系统中,每个数据库或资源都是独立的,它们可能位于不同的物理位置,由不同的机器或进程管理。
  • 分布式事务的目标是确保在所有参与的数据库或资源上,事务要么全部提交成功,要么全部回滚失败,以保持整个系统的一致性。

面临挑战

  • 分布式事务面临的挑战是如何在分散的环境中协调各个参与者的操作,并确保事务的原子性、一致性、隔离性和持久性。
  • 为了解决这个问题,通常使用两阶段提交(Two-Phase Commit,2PC)协议或者三阶段提交(Three-Phase Commit,3PC)协议等机制来实现分布式事务的管理。

在分布式系统中,分布式事务的设计和实现需要考虑到网络延迟、节点故障、并发访问等问题。因此,合理的分布式事务设计是提高系统稳定性和性能的关键。

分布式事务产生场景

1. 单体架构中多数据源场景

假设有一个电子商务应用,其中包含订单服务和支付服务,订单数据存储在MySQL数据库中,而支付数据存储在另一个MongoDB数据库中。在单体架构中,订单服务和支付服务分别是独立的模块,各自维护自己的数据源。

在这个场景下,多数据源场景可能导致分布式事务问题的流程如下:

  1. 用户在下订单时,订单服务会创建一个订单,并向MySQL数据库插入订单数据。

  2. 同时,订单服务需要调用支付服务来完成支付操作。支付服务会从MongoDB数据库中查询用户的支付信息,根据订单金额进行支付,并将支付结果存储到MongoDB数据库中。

  3. 在事务开始之前,订单服务和支付服务都需要获取一个数据库连接,开启一个数据库事务。

  4. 订单服务在MySQL数据库中插入订单数据,并等待支付服务完成支付。

  5. 支付服务从MongoDB数据库中获取支付信息,并进行支付操作。

  6. 如果支付操作成功,支付服务将支付结果保存到MongoDB数据库中。

  7. 如果支付操作失败,支付服务将回滚支付操作,并且回滚MongoDB数据库中的变更。

  8. 然后,支付服务将事务提交,关闭数据库连接。

  9. 订单服务等待支付服务的响应。

  10. 如果支付服务成功完成支付并提交事务,订单服务也提交事务,订单和支付数据都保存成功。

  11. 如果支付服务执行失败或超时,订单服务将回滚订单操作,并且回滚MySQL数据库中的变更。

  12. 订单服务提交失败,订单和支付数据都没有保存成功。

在这个流程中,由于订单服务和支付服务分别维护自己的数据源,它们在进行跨数据源的操作时面临分布式事务问题。如果支付服务在支付操作后发生故障,导致支付服务无法提交事务,则订单服务的订单数据已经插入到MySQL数据库中,但支付数据未能成功保存到MongoDB数据库中,这就导致了数据的不一致。

2. 分布式架构场景

  • 简单来说:跨JVM调用接口,一定会发生分布式事务问题。
  • 在RPC接口调用的过程中,A调用B服务接口之后,当A接口报错,无法回滚B接口的事务,导致最终A接口事务回滚了,B接口事务没有回滚,因此就需要解决分布式事务问题。

分布式事务解决方案

  1. 单体架构中多数据源场景可以使用jta + Atomikos。
  2. 基于RabbitMQ的形式解决,最终一致性的思想。
  3. 基于RocketMQ解决,采用事务消息。
  4. LCN:采用LCN模式,假关闭连接(目前已经被淘汰)。
  5. Alibaba的Seata背景非常强大,已经成为了主流,但是性能一般。如果你想要解决分布式事务问题,又想接口快速响应,就不要用Seata,Seata会导致接口响应变慢,就会发生超时。如果项目是追求快速响应,建议使用MQ最终一致性方案。

jta + Atomikos

JTA(Java Transaction API)和Atomikos是两个常用的工具,可以用于解决分布式事务问题。

  1. 首先,你需要在应用程序中引入JTA和Atomikos的依赖。你可以通过Maven或Gradle等构建工具来添加这些依赖。

  2. 然后,你需要在应用程序中配置Atomikos事务管理器。配置包括数据库连接池的设置以及Atomikos事务管理器的一些属性,如事务超时时间等。

  3. 在应用程序中,你可以使用JTA注解或编程式方式来标记事务。使用JTA注解可以在方法或类级别上标记事务,而编程式方式需要在代码中显式地开启、提交或回滚事务。

  4. 如果你的应用程序需要与其他应用程序或服务进行交互,你可以使用Atomikos的分布式事务协调器来确保所有的事务操作在一个统一的事务中执行。分布式事务协调器可以通过一些配置文件中的信息来管理分布式事务。

  5. 当一个分布式事务执行完成后,你可以使用Atomikos提供的API来查看事务的状态以及处理异常。你可以根据需要进行回滚、提交或恢复事务。

LCN模式

在这里插入图片描述

  1. 发起方和参与方与我们的LCN管理器全局事务协调者一直保持长连接。
  2. 发起方在调用接口之前会使用AOP生成一个全局的事务分组ID。
  3. 发起方在调用接口的时候会在请求头中传递该全局事务分组ID。
  4. 参与方会从请求头中获取该事务分组ID,当前业务执行完毕之后不会提交该事务,则会使用假关闭。
  5. 发起方调用接口完成之后,如果出现异常的情况下,会通知事务协调者回滚该事务,协调者再通知参与方回滚事务,这样两个服务都发生了事务回滚。
问题

LCN基于数据源假关闭,事务如果不提交,有可能会导致Mysql innoDB存储引擎的行锁机制,因为你事务没提交,行锁就不会释放。而且积分服务不提交事务,其它项目查询积分根本查不到你未提交的数据。

Alibaba的Seata解决分布式事务

Seata为用户提供了AT、TCC、SAGA和XA事务模式,为用户打造一站式分布式事务解决方案。其实说起来Seata和LCN差不多
在这里插入图片描述

  • 当发起方调用参与方接口,支付服务首先更新状态为已支付,那么这时undolog日志会生成前置镜像和后置镜像,前置镜像就是修改前的状态。这时调用积分服务,积分服务insert一条积分数据,undolog日志生成前置镜像和后置镜像。

  • 那么调用已完成,这时支付服务方报错了,那么通过undolog日志会进行逆向回滚,回滚到之前的状态,然后通知事务协调者,告诉积分服务也要回滚,那么积分服务的undolog日志也进行了逆向回滚,insert的逆向就是delete,这样两个服务就都回滚成功了。

  • 那么Seata与LCN最大的区别就是,在支付服务调用积分服务接口时,积分服务insert一条数据,LCN是不提交事务的,这样就导致别人无法查询到这条新insert的数据。但Seata提交了事务,所以可以查到。

问题
  • 有可能存在短暂脏读问题。
    • 解释一下脏读:一个事务没有提交的数据被另外一个事务读到,而全局事务是多个本地事务的集合,如果在全局事务下,某个本地事务提交了,如果没有全局控制,那么这个提交的事务也有可能被其他事务读到,也是一种脏写。
  • 这个问题的本质是:全局事务中的某个本地事务完成不代表全局事务也完成。
  • 比如我们支付服务调用积分服务,积分服务insert后提交事务,再相应给支付服务,这时支付服务报错了,打算回滚自己和积分服务,但这时其它的服务是可以查到积分服务刚insert的这条数据。但这时又回滚了,再查询发现刚查到的这条数据又没了

使用MQ解决分布式事务问题

在这里插入图片描述

  1. 当支付服务更新状态为已完成,然后发送消息到MQ,
  2. 积分服务获取到消息再insert一条数据
问题1:关于消息丢失问题(消息可靠性)
  1. ACK确认机制:生产者必须确保消息投递到MQ成功
    • 如果生产者投递消息失败的情况下,则通过日志记录下来,后期通过定时任务自动补偿。
  2. 服务端消息持久化,避免MQ宕机之后消息丢失
    • 生产者发送消息到MQ服务端,服务端持久化到硬盘上,再回执给生产者,告诉它消息投递成功。
  3. 重试机制:确保消费者消息消费成功(同时注意幂等性问题)
    • 如果消费者消费失败的情况下则MQ会采用间隔的形式不断重试,重试过程中需要解决幂等性问题。
问题2:事务回滚怎么处理
  • MQ自身无法回滚,只有补偿。
  • 如果支付服务方出错,这时积分服务已经insert并提交事务,那是系统的问题,积分增加就增加了,或者之后再扣除。
  • 如果你积分服务出错了,那后续补偿再把积分补上

一个原则:最终一致性

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/web/29362.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

【Java】已解决Java中的com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException异常

文章目录 一、分析问题背景二、可能出错的原因三、错误代码示例四、正确代码示例五、注意事项 已解决Java中的com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException异常 在Java中操作MySQL数据库时,我们经常会使用JDBC(Java Database Connectivi…

js中!emailPattern.test(email) 的test是什么意思

test 是 JavaScript 正则表达式(RegExp)对象的方法之一,用于测试一个字符串是否与正则表达式匹配。正则表达式是一种用于匹配字符串的模式,通常用于验证输入数据、查找和替换文本等。 使用 test 方法 test 方法语法如下&#xf…

Microsoft Remote Desktop:随时随地,掌控你的桌面

Microsoft Remote Desktop是一款卓越的远程桌面连接工具,由微软公司精心打造,旨在为用户提供高效、安全且便捷的远程办公体验。 Microsoft Remote Desktop mac版获取 这款软件支持跨平台操作,无论是在Windows、macOS还是iOS等设备上&#xf…

Idea连接GitLab的过程以及创建在gitlab中创建用户和群组

上期讲述了如何部署GitLab以及修复bug,这期我们讲述,如何连接idea。 首先安装gitlab插件 下载安装idea上并重启 配置ssh免密登录 使用管理员打开命令行输入:ssh-keygen -t rsa -C xxxaaa.com 到用户目录下.ssh查看id_rsa.pub文件 打开复制…

三分钟了解链动3+1模式

在电商领域的营销策略中,链动31模式以其独特的魅力和优势,吸引了众多商家的目光。下面,我们将对这一模式进行深度剖析,并探讨其相较于链动21模式的优势所在。 一、身份设置与奖励机制 链动31模式在身份设置上分为三种&#xff1…

漏洞挖掘 | 记一次某src拿下高危漏洞

一、获取web端管理员权限 0x01简单查看一下,发现存在登录以及证书查询操作指南等功能 因该站特征较为明显,所以对页面进行了强打码 0x02弱口令测试(无成果) 既然存在登录口,那么肯定要试试弱口令了,开干…

解锁微信客服的潜力:提升客户满意度与忠诚度

随着全球数字化进程的加速,企业如何有效利用数字化工具提升服务质量和客户满意度,成为了企业国际化、数字化出海的关键。在这一大背景下,微信客服以其卓越的功能和广泛的用户基础,成为了企业数字化转型的重要助力。 一、微信客服…

从零开始理解 XML 和 JSON 的区别

在这篇文章中,我们将深入探讨XML和JSON这两种数据格式的关键异同点,以便读者可以根据项目需求做出明智的技术选择。 了解XML XML(Extensible Markup Language)是一种用于数据定义的标记语言,最初由万维网联盟&#x…

【笔记】【矩阵的二分】668. 乘法表中第k小的数

力扣链接:题目 参考地址:参考 思路:二分查找 把矩阵想象成一维的已排好序的数组,用二分法找第k小的数字。 假设m行n列,则对应一维下标范围是从1到mn,初始: l1; rmn; mid(lr)/2 设mid在第i行&a…

新兴互联网银行搭档Apache SeaTunnel构建数据流通管道!

当新兴互联网银行乘着数字化改革的风潮搭档数据集成平台Apache SeaTunnel,成千万上亿的数据就有了快速流通的管道。6月26日14:00,Apache SeaTunnel社区将带上企业最佳实践与观众见面,与大家面对面交流最新的企业实践部署经验。锁定SeaTunnel视…

[spring] Spring MVC Thymeleaf(上)

[spring] Spring MVC & Thymeleaf(上) 本章内容主要过一下简单的 Spring MVC 的案例 简单来说,spring mvc 就是比较传统的网页开发流程,目前 boot 是可以比较轻松的配置 thymeleaf——毕竟 spring boot 内置对 thymeleaf 的…

未授权访问漏洞总结

以下总结了常见的未授权访问漏洞,还在持续更新中,遇到就会补充。欢迎大家关注~ 目录 FTP未授权访问(21) 漏洞原理 漏洞检测 漏洞利用 漏洞修复 LDAP未授权访问(389) 漏洞原理 漏洞检测 漏洞利用 …

Mongodb介绍及window环境安装

本文主要内容为nosql数据库-MongoDB介绍及window环境安装。 目录 什么是MongoDB? 主要特点 MongoDB 与Mysql对应 安装MongoDB 下载MongoDB 自定义安装 创建目录 配置环境变量 配置MongoDB服务 服务改为手动 启动与关闭 安装MongoDB Shell 下载安装包 …

三:SpringBoot的helloworld和使用Springboot的优点以及快速创建Springboot应用

三:SpringBoot的helloworld和使用Springboot的优点以及快速创建Springboot应用 一:HelloWorld [我们创建的是maven项目或者直接创建一个Spring] 1.1:创建一个maven 项目(1】:需要自己手动写一个SpringBoot 的启动类同…

为什么网上这么多破解 Intellij IDEA 的工具,但是官方却不管呢?

大家好,我是小2,一个程序员~ 程序员小2 每天一篇技术重磅好文,涉及一线互联网大厂应用架构(高可用、高性能、高稳定),AI、大数据、java架构等热门领域。 112篇原创内容 公众号 来源:Java知音…

基于Spring Boot+VUE旅游管理系统

1管理员功能模块 管理员通过点击后台管理,进入页面可以输入用户名、密码、角色进行登录相对应操作,如图1所示。 图1管理员登录界面 管理员通过点击后台管理,进入页面可以填写首页、个人中心、用户管理、旅游方案管理、旅游购买管理、系统管…

HarmonyOS NEXT 从不懂到 ToDo List 实例开发

本文将从一个前端开发者的角度出发,速通鸿蒙 Next 开发的方方面面,并最终开发一个 Todo List 小实例。 简介 首先,鸿蒙使用 ArkTS 作为原生开发语言。如果你熟悉 TypeScript 编程语言,那基本上可以无缝过渡,因为 Ark…

Linux常⽤服务器构建-samba

目录 1. 介绍 2. 安装 3. 配置 3.1 创建存放共享⽂件的路径 3.2 创建samba账户 4 重启samba 5. 访问共享⽂件 5.1 mac下访问⽅式 5.2 windows下访问⽅式 1. 介绍 Samba 是在 Linux 和 UNIX 系统上实现 SMB 协议的⼀个免费软件,能够完成在 windows 、 mac 操作系统…

统计分析方法-非参数检验-python

文章目录 前言非参数检验特点常见的非参数检验一、Cliffs Delta动机定义二、Wilcoxon Signed-Rank Test定义三、 Friedman检验适用场景公式python 代码Wilcoxon Signed-Rank Test和 cliffs deltaFriedman前言 记录一下自非参数检验的学习过程,如有不对请纠正。 非参数检验 …

[AI资讯·0618] 快手AI模型“可灵“在质量优于Sora,OpenAI和谷歌发布新技术推动AI视频推理发展,Gemini1.5Pro在该榜单中表现突出

AI资讯 陕西推出AI千亿级发展计划,五大产业集群,智算超3000P试了快手的视频AI,竟然有点领先“技术故障”背刺巴菲特,金融大模型到底靠不靠谱?Gemini视频推理遥遥领先GPT-4o,首个视频多模态基准Video-MME国…