郴州市人力资源网官网/爱站网seo培训

郴州市人力资源网官网,爱站网seo培训,wordpress 安全加固,衡水网站制作公司大家好,我是钢板兽! 在上一篇文章中,我分别介绍了 Undo Log、Redo Log 和 Binlog 在事务执行过程中的作用与写入机制。然而,实际应用中,这三种日志的写入是有先后顺序的。因此,本篇文章将深入探讨它们的写…

大家好,我是钢板兽!

在上一篇文章中,我分别介绍了 Undo LogRedo LogBinlog 在事务执行过程中的作用与写入机制。然而,实际应用中,这三种日志的写入是有先后顺序的。因此,本篇文章将深入探讨它们的写入顺序,以便更好地理解三者与事务的联系。

1.涉及的关键缓存

在事务执行过程中,涉及多个重要的缓存机制,理解这些缓存有助于更清晰地掌握日志的写入顺序:

  • Buffer Pool(缓冲池)存储 InnoDB 数据页的内存缓冲区,事务修改数据页首先在此处完成,修改后的数据页被称为脏页(Dirty Page)
  • Undo Log Buffer(Undo 日志缓存区) 记录事务修改前的数据版本,存储于内存,在特定时机刷新到磁盘的 Undo 表空间。
  • Redo Log Buffer(Redo 日志缓存区) 存储事务修改后的数据变化记录(物理日志),位于内存中,在事务提交时强制刷新到磁盘的 Redo 日志文件。
  • Binlog Cache(Binlog 缓存区) MySQL Server层的内存缓存,存储事务中修改的数据变化记录(逻辑变化),在事务提交时统一刷入磁盘的 Binlog 文件。

三种日志在内存与磁盘中的存在方式

2.事务执行阶段各日志的写入流程

事务可以分为两个阶段:事务执行阶段和事务提交阶段,假设我们有一个更新事务的SQL语句:

UPDATE account SET balance = balance - 100 WHERE id = 1;

我们先来看看事务执行阶段各日志的写入流程:

(1)数据页加载到buffer pool:从磁盘中加载数据页到buffer pool;

(1)写入Undo Log Buffer:先把待修改数据的原始版本(例如 balance=1000)记录到内存中的 Undo Log Buffer 中。

  • 这个 Undo Log Buffer 会在合适时机(后台线程)异步刷新到磁盘(Undo 表空间)。

(3)数据页(脏页)的修改:事务修改内存中的数据页(buffer pool),修改后的数据页变为脏页(Dirty Page),等待后台线程(如checkpoint)异步刷新到磁盘上的表空间文件(.ibd 文件)。

(4)写入Redo Log Buffer:数据库会把修改后的数据记录(例如:balance=900)记录到内存中的 Redo Log Buffer 中。

  • Redo Log Buffer 会在以下几种情况下被刷新到磁盘(Redo Log File):
    • 事务提交时
    • Redo Log Buffer 达到指定阈值;
    • 后台线程定期刷新。

(5)写入Binlog Cache:把SQL语句逻辑记录到内存中的Binlog Cache。

到这里为止(事务未提交阶段),此时的日志情况为:

  • Undo Log Buffer 已写入旧版本数据;
  • Redo Log Buffer 中包含数据修改后的版本记录;
  • Buffer Pool 中的数据页被真正修改,处于内存脏页状态。
  • Binlog Cache中包含此次修改的SQL语句逻辑。

3.事务提交阶段

事务提交采用两阶段提交(2PC)机制:Prepare阶段(半提交状态)和Commit阶段(已提交状态),

(1)Prepare状态:InnoDB 存储引擎将 Redo Log Buffer 中的日志记录强制刷入磁盘上的 Redo Log File(调用 write 和 fsync),Undo Log也是同样的过程。

  • 此时Redo Log 已持久化,但 Binlog 尚未刷入磁盘。

(2)MySQL层将 Binlog Cache 中的日志记录刷新到磁盘中的Binlog文件(调用 write 和 fsync)。

(3)Commit状态:执行器调用InnoDB存储引擎的提交事务接口,将刚刚写入的Redo Log改成Commit状态

4.为什么要两阶段提交?

这里的两阶段提交主要是针对Redo Log和Binlog来说的,为什么不能是先写Redo Log 后写binlog,或者先写binlog 后写Redo Log就完事儿了呢,还要从中多出一个“Prepare状态”?

(1)假设是先写Redo Log,后写binlog。向表中插入一条数据R,当redolog写入完成,但是binlog还没写时,就出现了宕机.那么主机崩溃恢复时,redolog中是有记录R的,但是从机根据binlog进行主从同步时,从机是没有数据R,就会出现主从数据不一致的问题。

(2)假设先写 binlog 再写 redolog 。向表中插入一条记录 R,先写 binlog 再写 redolog,当binlog写入完成,但是redolog还没写时,就出现了宕机,那么从机根据binlog进行主从同步时,从机是有数据R的。但是主机崩溃恢复时,redolog中是没有记录R的,就会出现主从数据不一致的问题。

但是现在“两阶段提交”,我们再来看几种情况:

(1)一阶段提交之后崩溃了,即写入 redo log,处于 prepare 状态的时候崩溃了,此时,由于 binlog 还没写,redo log 处于 prepare 状态还没提交,所以崩溃恢复的时候,这个事务会根据undolog来回滚,此时 binlog 还没写,所以也不会传到备库。

(2)写完 binlog 之后崩溃了,此时:redolog 中的日志处于 prepare 状态,还没有提交,那么恢复的时候,首先检查 binlog 中的事务是否存在并且完整,如果存在且完整,则直接提交事务,如果不存在或者不完整,则回滚事务。

(3)假设 redolog 处于 Commit 状态的时候崩溃了,那么重启后的处理方案同情况二。

最后,我们来画图总结一下三种日志在事务过程中的写入顺序:

三种日志在事务过程中的写入顺序

5.三种日志写入的参数

这里总结一下三种日志的写入过程涉及到的参数变量,可以了解一下。

(1)Redo Log的参数

参数作用
innodb_log_file_size单个 redo log 文件的大小(影响崩溃恢复速度)。
innodb_log_files_in_groupredo log 文件数量,默认 2,日志总大小 = innodb_log_file_size × innodb_log_files_in_group
innodb_flush_log_at_trx_commit控制 redo log 刷盘策略,取值: 0:每秒刷盘一次(可能丢失 1 秒数据) 1(默认):每次事务提交时写入并刷盘(最安全) 2:每次事务提交时写入 OS 缓存,但不刷盘(可能丢数据)
innodb_log_buffer_sizeredo log 缓冲区大小,事务提交时才刷盘,缓冲区满了也会刷。

(2)Binlog的参数

参数作用
log_bin是否开启 binlog,默认关闭,主从复制和 Point-In-Time 恢复必须开启。
binlog_formatbinlog 记录格式,取值: STATEMENT(SQL 语句级别,可能有副作用) ROW(记录数据变更,推荐) MIXED(两者结合)
sync_binlog控制 binlog 刷盘策略,取值: 0:操作系统决定何时刷盘(可能丢数据) 1(默认):每次事务提交时刷盘(最安全) >1:每 N 个事务刷一次盘,性能较好但风险增加
max_binlog_size单个 binlog 文件的大小,超过该值后生成新 binlog(默认 1GB)。
expire_logs_daysbinlog 自动清理天数,如 7 表示 7 天后自动删除。

(3)Undo Log的参数

关键参数:

参数作用
innodb_undo_tablespacesundo log 独立表空间数量,默认 0,表示undo log全部写入一个表空间文件,可以设置这个变量,平均分配到多少个文件中.
innodb_undo_log_truncate是否允许 undo log 触发在线回收机制,默认 1,可防止 undo log 过大。
innodb_max_undo_log_sizeundo log 触发 truncate 的阈值(默认 1GB)。
innodb_undo_logs事务可以同时使用的回滚段数量(默认 128)。

通过本篇文章的讲解,相信大家对 Undo Log、Redo Log 和 Binlog 的写入顺序及其重要性有了更深入的理解。如果这篇文章对你有所帮助,欢迎点赞、转发、留言!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/diannao/73691.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

AI自动文献综述——python先把知网的文献转excel

第一步 Refworks转excel 下载以后是个txt文件, 帮我把这个txt文件转excel,用函数形式来写便于我后期整理成软件 提取 其中的 标题,作者,单位,关键词,摘要。 分别存入excel列。 import re import pandas as pddef extract_and_convert(txt_file_path, output_excel_path…

树莓派学习:环境配置

目录 树莓派镜像工具下载 树莓派环境配置 通过Putty连接树莓派 使用树莓派的VNC 在树莓派上面进行简单的编程工作 C语言输出”hello 树莓派” Python输出”hello 树莓派” 总结与思考 树莓派镜像工具下载 在开始配置树莓派环境之前,首先需要下载树莓派镜像…

STC89C52单片机学习——第22节: LED点阵屏显示图形动画

写这个文章是用来学习的,记录一下我的学习过程。希望我能一直坚持下去,我只是一个小白,只是想好好学习,我知道这会很难,但我还是想去做! 本文写于:2025.03.16 51单片机学习——第22节: LED点阵屏显示图形&动画 前言开发板说明引用解答和…

浅谈数据分析及数据思维

目录 一、数据分析及数据分析思维?1.1 数据分析的本质1.2 数据分析思维的本质1.2.1 拥有数据思维的具体表现1.2.2 如何培养自己的数据思维1.2.2.1 书籍1.2.2.2 借助工具1.2.2.3 刻意练习 二、数据分析的价值及必备能力?2.1 数据分析的价值2.1.1 现状分析…

Cursor的使用感受,帮你使用好自动化编程工具,整理笔记

使用感受 说实话,我觉得cursor还是好用的,可能我刚开始使用,没有使用的非常的熟练,运用也没有非常的透彻,总体体验还是不错的,在使用它时,我优先考虑,前端页面功能复用的时候&#…

SSM框架——Spring面试题

Spring常见面试题 Spring框架中的单例bean是线程安全的吗 不是线程安全的 Spring框架中有一个Scope注解,默认的值就是singleton,单例的。 因为一般在spring的bean的中都是注入无状态的对象,没有线程安全问题,如果在bean中定义了可…

20250317笔记本电脑在ubuntu22.04下使用acpi命令查看电池电量

20250317笔记本电脑在ubuntu22.04下使用acpi命令查看电池电量 2025/3/17 18:05 百度:ubuntu查看电池电量 百度为您找到以下结果 ubuntu查看电池电量 在Ubuntu操作系统中,查看电池电量通常可以通过命令行或者图形界面来完成。下面是一些常见的方法&…

SpringBoot第三站:配置嵌入式服务器使用外置的Servlet容器

目录 1. 配置嵌入式服务器 1.1 如何定制和修改Servlet容器的相关配置 1.server.port8080 2. server.context-path/tx 3. server.tomcat.uri-encodingUTF-8 1.2 注册Servlet三大组件【Servlet,Filter,Listener】 1. servlet 2. filter 3. 监听器…

C# WPF编程-启动新窗口

C# WPF编程-启动新窗口 新建窗口: 工程》添加》窗口 命名并添加新的窗口 这里窗口名称为Window1.xaml 启动新窗口 Window1 win1 new Window1(); win1.Show(); // 非模态启动窗口win1.ShowDialog(); // 模态启动窗口 模态窗口:当一个模态窗口被打开时&a…

谈谈 undefined 和 null

*** 补充 null 和 ‘’

Ubuntu快速安装使用gRPC C++

目录 引言一、快速安装1. 安装必要依赖库2. 安装gRPC 二、测试使用三、参考博客 引言 关于gRPC随着云原生微服务的火热也流行了起来,而且学好一个gRPC框架对目前来说也是必须的了。然而对于一个基础的小白来说,这个gRPC的框架运用起来是及其的困难&…

高数1.5 极限的运算法则

1. 预备知识 2.四则求极限法则 3.复合运算求极限法则

pandas学习笔记(一)——基础知识和应用案例

pandas学习笔记 基础语法参考菜鸟教程:https://www.runoob.com/pandas/pandas-tutorial.html # jupyter import pandas as pd import matplotlib from matplotlib import pyplot as plt import numpy as npmatplotlib.use(TkAgg)data {timestamp: [1, 2, 3, 4, 5…

海绵音乐 3.4.0 | 免费AI音乐创作软件,支持多种风格智能生成

海绵音乐是一款专为Android用户设计的免费AI音乐创作软件,搭载深度神经网络作曲引擎,支持流行、电子、古风等12种音乐风格智能生成。提供多轨道编辑界面(8轨同步混音),可自定义鼓点、旋律和和弦进行实时混音&#xff0…

2025 香港 Web3 嘉年华:全球 Web3 生态的年度盛会

自 2023 年首届香港 Web3 嘉年华成功举办以来,这一盛会已成为全球 Web3 领域规模最大、影响力最深远的行业活动之一。2025 年 4 月 6 日至 9 日,第三届香港 Web3 嘉年华将在香港盛大举行。本届活动由万向区块链实验室与 HashKey Group 联合主办、W3ME 承…

Linux目录结构以及文件操作

Linux目录结构以及文件操作 ubuntu属于Linux的发行版,带图形界面。但是跑在嵌入式设备中的Linux操作系统往往不带图形界面,直接使用命令来操作。Linux区分大小写。 在Linux系统上,文件被看作字节序列。 普通文件(—&#xff09…

React19源码系列之FiberRoot节点和Fiber节点

在上一篇文章,看了createRoot函数的大致流程。 createContainer函数创建并返回了FiberRoot 。FiberRoot是由createFiberRoot函数创建, createFiberRoot函数还将 FiberRoot和 根Fiber 通过current属性建立起了联系。将FiberRoot作为参数传给 ReactDOMRoo…

【2025年3月最新】Cities_Skylines:城市天际线1全DLC解锁下载与教程

亲测2025年3月11日能用,能解锁全部DLC 使用教程 点击下载 点击下载

基于Django的交通指示图像识别分析系统

【Django】基于Django的交通指示图像识别分析系统 (完整系统源码开发笔记详细部署教程)✅ 目录 一、项目简介二、项目界面展示三、项目视频展示 一、项目简介 本项目旨在通过大量交通标志数据训练后,得到较好的识别模型,便于用户…

SAP HANA on AWS Amazon Web Services

SAP HANA on AWS Amazon Web Services