解析MySQL Binlog：从零开始的入门指南【binlog入门指南】

🎏：你只管努力，剩下的交给时间

🏠 ：小破站

解析MySQL Binlog：从零开始的入门指南

    • 前言
    • 第一：MySQL中的Binlog详解
      • 1. 什么是Binlog？
      • 2. Binlog的作用
        • a. 数据恢复：
        • b. 主从复制
        • c. 点对点复制：
        • d. 数据库备份：
        • e. 审计与监控：
      • 3. Binlog的重要性：
        • a. 事务的一致性：
        • b. 数据的持久性：
        • c. 数据同步与复制：
        • d. 故障恢复：
      • 4. Binlog的组成：
      • 5. 配置和管理：
    • 第二：binlog的类型
      • 1. Statement模式：
        • 优势：
        • 适用场景：
        • 注意事项：
      • 2. Row模式：
        • 优势：
        • 适用场景：
        • 注意事项：
      • 3. Mixed模式：
        • 优势：
        • 适用场景：
        • 注意事项：
      • 选择合适的Binlog模式：
    • 第三：启用和禁用Binlog
      • 1. 启用Binlog：
        • 步骤：
        • 示例：
      • 2. 禁用Binlog：
        • 步骤：
        • 示例：
      • 在特定情况下禁用Binlog的原因：
    • 第四：查看和理解Binlog文件
      • 1. 查看Binlog文件内容：
        • 使用mysqlbinlog工具：
          • 语法：
          • 示例：
      • 2. 解析Binlog文件：
        • 使用mysqlbinlog解析为SQL语句：
          • 语法：
          • 示例：
      • 3. 使用Binlog解析工具：
        • 使用MySQL Replication Viewer：
        • 使用MySqlBinLogAnalyzer：
      • 4. 直接查询信息_schema数据库：
        • 查询information_schema数据库：
          • 示例：
      • 5. 日志格式和事件类型：
        • 理解日志格式：
        • 查看事件类型：
      • 注意事项：

前言

在MySQL的世界中，Binlog是一个关键的组成部分，但对于初学者来说可能是一个充满挑战的领域。本篇博客将带你探索Binlog的基础知识，解释它的作用以及为什么对数据库管理如此重要。

第一：MySQL中的Binlog详解

1. 什么是Binlog？

Binlog（Binary Log） 是MySQL数据库中的二进制日志文件，用于记录数据库的所有更改操作。它以二进制的形式存储，包含了对数据库执行的所有修改操作的详细信息，如插入、更新、删除等。Binlog是MySQL事务日志的一部分，与Redo Log（重做日志）一起，确保数据库的一致性、持久性，以及提供一些关键的数据库管理功能。

2. Binlog的作用

a. 数据恢复：

Binlog记录了数据库的历史变更，通过重放Binlog中的事件，可以将数据库还原到特定的时间点。这对于恢复误删数据、应对错误的批量操作等情况非常有用。

b. 主从复制

在主从复制中，主服务器将所有的更改记录到Binlog中，而从服务器通过读取主服务器的Binlog并执行相同的更改来保持数据同步。这实现了数据的复制和冗余，提高了系统的可用性和可靠性。

c. 点对点复制：

类似于主从复制，但点对点复制允许多个服务器之间相互复制数据，而不仅限于主从关系。Binlog在这种情况下发挥着关键的作用，确保不同服务器之间的数据同步。

d. 数据库备份：

Binlog也是数据库备份的一部分。通过备份Binlog，可以实现增量备份，只备份自上次完整备份以来发生的变更，从而减少备份的时间和存储成本。

e. 审计与监控：

Binlog记录了数据库中的每个事务操作，包括操作的时间、执行者等信息。这对于审计数据库的访问记录、监控数据库的活动非常有帮助。

3. Binlog的重要性：

a. 事务的一致性：

Binlog记录了每个事务的开始和提交事件，通过重放Binlog，可以确保事务的一致性。即事务要么完全执行，要么完全不执行，维护了数据库的一致性。

b. 数据的持久性：

在事务提交前，数据库引擎将事务的修改记录到Binlog中，确保数据的持久性。即使在事务提交后发生故障，可以通过重放Binlog来还原数据，保障数据库的持久性。

c. 数据同步与复制：

Binlog在主从复制和点对点复制中发挥关键作用，确保不同服务器之间的数据同步。这对于分布式系统和数据冗余至关重要。

d. 故障恢复：

在数据库崩溃或发生其他故障时，通过重放Binlog，可以将数据库还原到最后一次备份之后的状态，减少数据丢失。

4. Binlog的组成：

Binlog由多个事件（Event）组成，每个事件代表一个数据库操作，如插入、更新、删除等。每个事件包含了相关操作的详细信息，如表名、列名、修改前后的值等。这些事件以二进制的形式存储，使得Binlog更为高效和紧凑。

5. 配置和管理：

在MySQL中，可以通过配置文件（通常是my.cnf）进行Binlog的相关设置，如启用/禁用Binlog、指定Binlog的存储路径、设置Binlog的大小等。管理员可以根据实际需求进行配置，以平衡性能和存储成本。

在MySQL中，Binlog（二进制日志）有不同的类型，主要包括Statement、Row和Mixed模式。这些模式定义了MySQL在记录二进制日志时采用的策略，以确定如何记录对数据库的更改。每种模式都有其优势和适用场景，选择合适的模式取决于具体的应用需求和性能考虑。

第二：binlog的类型

1. Statement模式：

在Statement模式下，MySQL将每个SQL语句作为一个事件记录到Binlog中。具体来说，每个更新操作（如INSERT、UPDATE、DELETE等）都以SQL语句的形式被记录。

优势：
  • 易读性高： Binlog中记录的是SQL语句，便于人类阅读和理解。
  • 节省空间： 因为记录的是SQL语句，所以通常比其他模式占用更少的存储空间。
适用场景：
  • 基于SQL语句的复制： 当使用基于SQL语句的复制技术，或者要求Binlog具有高可读性时，可以选择Statement模式。
注意事项：
  • 可能引发非确定性问题： 由于某些SQL语句的执行结果可能会受到环境和状态的影响，因此在一些特定场景下可能会引发非确定性问题。

2. Row模式：

在Row模式下，MySQL将每个被修改的行的内容作为一个事件记录到Binlog中。不再记录SQL语句，而是记录数据行的变更情况。

优势：
  • 更精确： 记录了实际被修改的行，不受SQL语句的语法或环境影响，更为精确。
  • 避免非确定性问题： 由于记录了行的具体变更情况，避免了某些非确定性问题。
适用场景：
  • 要求更高精度的数据复制： 当要求更高的数据复制精度，或者在一些需要避免非确定性问题的场景中，可以选择Row模式。
注意事项：
  • 占用更多存储空间： 由于记录了每个被修改的行，所以通常比Statement模式占用更多的存储空间。

3. Mixed模式：

Mixed模式是Statement模式和Row模式的结合，MySQL会根据具体的SQL语句来选择使用Statement模式或Row模式。大多数情况下，MySQL会选择Statement模式，但对于某些特殊的情况，会使用Row模式。

优势：
  • 灵活性： 根据具体情况动态选择合适的模式，兼顾了Statement和Row模式的优势。
适用场景：
  • 在大多数情况下使用Statement模式，但对于一些特殊情况使用Row模式： Mixed模式在大多数情况下保持了Statement模式的高效性，但在需要更高精度的情况下可以动态切换到Row模式。
注意事项：
  • 可能引发非确定性问题： 在Statement模式下可能存在的非确定性问题，在Mixed模式下仍然可能存在。

选择合适的Binlog模式：

  • 考虑复制技术和需求： 如果使用基于SQL语句的复制技术，Statement模式可能更合适。如果要求更高的数据精度，Row模式可能更适用。
  • 考虑存储空间： 如果对存储空间比较敏感，可以选择Statement模式。如果数据精度是更为关键的因素，可以选择Row模式。
  • 使用Mixed模式： 如果希望在大多数情况下保持高效性，但对于某些特殊情况需要更高精度，可以选择Mixed模式。

第三：启用和禁用Binlog

在MySQL中，启用和禁用Binlog（二进制日志）涉及到修改MySQL配置文件，并重新启动MySQL服务。下面是演示如何在MySQL中启用和禁用Binlog的步骤：

1. 启用Binlog：

步骤：

  1. 打开MySQL的配置文件，通常是my.cnf。

  2. 找到配置文件中与Binlog相关的部分，可能包括以下几行：

    server_id = 1
log_bin = /var/log/mysql/mysql-bin.log

  3. 确保 log_bin 配置项被设置，并指定了Binlog的文件路径。

  4. 如果没有设置 server_id，也设置一个唯一的服务器标识号。

  5. 保存并关闭配置文件。

示例：
# my.cnfserver_id = 1
log_bin = /var/log/mysql/mysql-bin.log

  1. 重新启动MySQL服务：

    sudo service mysql restart

  2. 验证Binlog是否启用：

    SHOW VARIABLES LIKE 'log_bin';

    如果输出显示 log_bin 的值为 ON，则表示Binlog已成功启用。

2. 禁用Binlog：

步骤：

  1. 打开MySQL的配置文件，通常是my.cnf。

  2. 注释或删除与Binlog相关的配置项，包括 log_bin 和 server_id：

    # log_bin = /var/log/mysql/mysql-bin.log
# server_id = 1

  3. 保存并关闭配置文件。

示例：
# my.cnf# log_bin = /var/log/mysql/mysql-bin.log
# server_id = 1

  1. 重新启动MySQL服务：

    sudo service mysql restart

  2. 验证Binlog是否禁用：

    SHOW VARIABLES LIKE 'log_bin';

    如果输出显示 log_bin 的值为 OFF，则表示Binlog已成功禁用。

在特定情况下禁用Binlog的原因：

  1. 测试和开发环境： 在测试和开发环境中，可能不需要启用Binlog，以减少日志记录对性能的影响，并简化系统的配置。

  2. 临时性能优化： 在一些需要追求极致性能的场景下，可以临时禁用Binlog。例如，进行大批量数据加载时，禁用Binlog可以提高数据加载的速度。

  3. 节省磁盘空间： 在一些对磁盘空间要求较为严格的情况下，禁用Binlog可以减少对磁盘空间的占用。

  4. 特定业务需求： 某些业务场景可能不要求数据的持久性，因此可以考虑禁用Binlog以提高性能。

注意： 禁用Binlog会导致数据库失去了数据恢复和复制的能力，因此在正式生产环境中，禁用Binlog需要慎重考虑，并确保在业务需求和系统要求下做出明智的选择。

第四：查看和理解Binlog文件

在MySQL中，查看和解析Binlog文件通常需要使用一些专门的工具。以下是一些常用的工具和技术，帮助你更好地理解Binlog的内容：

1. 查看Binlog文件内容：

使用mysqlbinlog工具：

mysqlbinlog 是MySQL提供的一个用于查看和解析Binlog文件的命令行工具。

语法：
mysqlbinlog [options] binlog-file [binlog-file ...]
示例：
mysqlbinlog /var/log/mysql/mysql-bin.000001

2. 解析Binlog文件：

使用mysqlbinlog解析为SQL语句：

mysqlbinlog 不仅可以查看Binlog文件的原始内容，还可以解析为SQL语句，便于理解Binlog中具体的数据库操作。

语法：
mysqlbinlog [options] binlog-file [binlog-file ...] | mysql -u username -p
示例：
mysqlbinlog /var/log/mysql/mysql-bin.000001 | mysql -u root -p

这样会将Binlog文件中的内容解析并执行，相当于将Binlog还原到数据库中。

3. 使用Binlog解析工具：

使用MySQL Replication Viewer：

MySQL Replication Viewer是一个图形界面工具，用于解析和查看Binlog文件，以图形方式展示Binlog的内容和事件。

使用MySqlBinLogAnalyzer：

MySqlBinLogAnalyzer是另一个开源的Binlog解析工具，可以以图形化的方式呈现Binlog的内容，并提供了一些额外的功能，如过滤事件、搜索等。

4. 直接查询信息_schema数据库：

查询information_schema数据库：

在MySQL中，可以通过查询 information_schema 数据库的 mysql 表来获取关于Binlog的一些信息。

示例：
SELECT * FROM information_schema.global_status WHERE variable_name LIKE 'Binlog%';

5. 日志格式和事件类型：

理解日志格式：

Binlog文件有不同的日志格式，包括Statement、Row和Mixed。通过查看Binlog的头部信息，可以了解Binlog使用的日志格式。

mysqlbinlog /var/log/mysql/mysql-bin.000001 | grep "Log_format"
查看事件类型：

Binlog中的事件类型包括Query事件、Update事件、Write_rows事件等。通过查看Binlog文件，你可以了解每个事件的内容和类型。

mysqlbinlog /var/log/mysql/mysql-bin.000001 | grep "###"

注意事项：

  • 在解析和查看Binlog文件时，务必小心不要对生产数据库产生不必要的影响。可以在备份的副本上进行操作，以确保安全性。
  • Binlog的内容可能会很庞大，因此最好通过过滤和搜索等方式，定位到感兴趣的部分。
  • 理解Binlog中的事件类型和日志格式对于解析其内容至关重要。

通过上述工具和技术，你可以更好地查看和理解Binlog文件，了解数据库的历史变更和操作。这对于故障排查、数据恢复以及监控数据库活动非常有帮助。

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/172706.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

jdk17安装全方位手把手安装教程 / 已有jdk8了，安装JDK17后如何配置环境变量 / 多个不同版本的JDK，如何配置环境变量？

jdk17安装全方位手把手安装教程 / 已有jdk8了，安装JDK17后如何配置环境变量 / 多个不同版本的JDK，如何配置环境变量？

🧸欢迎来到dream_ready的博客，📜相信您对博主首页也很感兴趣o (ˉ▽ˉ；) 学生邮箱白嫖/免费安装JetBrains全家桶(IDEA/pycharm等) —— 保姆级教程 目录 1、下载jdk17 2、安装jdk17 3、配置环境变量 -> 电脑无其他jdk 4、…
阅读更多...
【Git】修改提交信息（单次、批量）

【Git】修改提交信息（单次、批量）

文章目录 修改最近一次 commit 的提交信息修改某次 commit 的提交信息方法总结 修改最近一次 commit 的提交信息 git commit --amend -m "new message"修改某次 commit 的提交信息 git log --oneline 运行结果如下2f80f1b commit 4 9ee990a 第三次提交 40f2f03 comm…
阅读更多...
Echarts title标题配置项的使用 更改颜色 副标题

Echarts title标题配置项的使用 更改颜色 副标题

title配置项主要是对图表的标题进行配置 title配置项所有属性文档 title： { ...... }设置标题 副标题 text: 简单创建柱形图,//图表标题 subtext: 副标题,如果想对副标题设置 超链接 边框 颜色 宽度…等 比如：设置超链接 sublink:‘…’, 设置标题位置…
阅读更多...
【Unity入门】LayerMask小结

【Unity入门】LayerMask小结

LayerMask常用的几种方法 LayerMask.GetMask 根据 层名称 获取其层遮罩值 遮罩值 2^层索引 假设 UserLayerA 和 UserLayerB 是第十层和第十一层。 这两个层会具有 User Layer 值 10 和 11。若要获取其层遮罩值， 可以将其名称传入 GetMask。参数可以是 其名称的列…
阅读更多...
10_7iic整体框架流程

10_7iic整体框架流程

在内核中 这边把iic整个流程分成了 4层 iic_dtiver at24_iic_eeprom 也就是我们的自己的驱动 i2c-core.c 核心层 i2c/busses/i2c-s3c2410.c 控制器层 平台总线驱动层,或者也是图中的设备树 硬件描述 我们假设 板子上有三个iic控制器 0 1 2 这里在控制器0 上挂载了gt24c02的eep…
阅读更多...
STK Components 二次开发-创建地面站

STK Components 二次开发-创建地面站

1.地面站只需要知道地面站的经纬高。 // Define the location of the facility using cartographic coordinates.var location new Cartographic(Trig.DegreesToRadians(-75.596766667), Trig.DegreesToRadians(40.0388333333), 0.0); 2.创建地面站 创建方式和卫星一样生成对…
阅读更多...
Centos 7 离线安装(tar) NodeJS 16 和 Vue

Centos 7 离线安装(tar) NodeJS 16 和 Vue

目录 一、下载Nodejs二、安装Nodejs2.1、创建安装目录2.2、上传安装包(无网络) or 直接下载(有网络)2.3、解压缩2.4、配置环境变量2.5、创建软连接2.6、更换镜像源2.7、验证是否安装成功 三、安装Vue 一、下载Nodejs Nodejs：https://nodejs.org/en/ 历史版本&#…
阅读更多...
如何使用JMeter测试导入接口/导出接口

如何使用JMeter测试导入接口/导出接口

今天一上班，被开发问了一个问题：JMeter调试接口，文件导入接口怎么老是不通？还有导出文件接口，不知道文件导到哪里去了？ 我一听，这不是JMeter做接口测试经常遇到的嘛，但是一时半会又…
阅读更多...
解决视口动画插件jquery.aniview.js使用animate.css时无效的问题（最新版本网页视口动画插件的使用及没作用、没反应）

解决视口动画插件jquery.aniview.js使用animate.css时无效的问题（最新版本网页视口动画插件的使用及没作用、没反应）

当网站页面元素进入视口时自动应用过渡效果。CSS过渡效果可以为网页添加动画效果，并提供了一种平滑的转换方式，使元素的变化更加流畅和生动。而通过jQuery插件来获取页面滚动位置决定合适调用动画效果。 一、官网 animate.css官网 一款强大的预设css3动…
阅读更多...
Linux的基本指令（四）

Linux的基本指令（四）

目录 前言 时间相关的指令 date指令 时间戳 日志 时间戳转化为具体的时间 cal指令 find指令（十分重要） grep指令（行文本过滤工具） 学前补充 什么是打包和压缩？ 为什么要打包和压缩？ 怎么打包和…
阅读更多...
【数据结构】二叉树oj题

【数据结构】二叉树oj题

在处理oj题之前我们需要先处理一下之前遗留的问题 在二叉树中寻找为x的节点 BTNode* BinaryTreeFind(BTNode* root, int x) {if (root NULL)return NULL;if (root->data x)return root;BTNode* ret1 BinaryTreeFind(root->left, x);BTNode* ret2 BinaryTreeFind(ro…
阅读更多...
Windows系统下更新后自带的画图软件出现马赛克bug

Windows系统下更新后自带的画图软件出现马赛克bug

一.bug的样子🍗 在使用橡皮后，原来写的内容会变成马赛克。而我们希望它是纯白色的。 二.解决方法🍗 第一步 第二步 第三步 三. 解决后的效果🍗 用橡皮擦随便擦都不会出现马赛克了。 更新过后，想用win自带的画图软件会出…
阅读更多...
梦回吹角连营(超1e18的快速幂模板，两大数相乘处理)

梦回吹角连营(超1e18的快速幂模板，两大数相乘处理)

Description 给定f(n)n^an^(a1)...n^(b-1)n^b 求f(n)%MOD Input 输入一个正整数T(T<10),表示有T组数据&#xff0c;每组数据包括三个整数a,b,n(0<n,a,b<1e9) Output 输出 f(n)%10000000033 的结果Sample Input 2 1 2 3 2 1 3 Sample Output 12 12 思路&#…
阅读更多...
【前沿技术了解】web图形Canvas、svg、WebGL、数据可视化引擎的技术选型

【前沿技术了解】web图形Canvas、svg、WebGL、数据可视化引擎的技术选型

目录 Canvas&#xff1a;HTML5新增 Canvas标签&#xff08;画布&#xff09; 渲染上下文canvas.getContext(contextType[, contextAttributes]) 上下文类型&#xff08;contextType&#xff09; 上下文属性 (contextAttributes) 示例 动画 setInterval(function, delay)…
阅读更多...
2023/11/26总结

2023/11/26总结

一些学习记录&#xff1a; 在对数据库进行一系列操作的时候&#xff0c;遇到一个问题&#xff0c;在插入数据的时候&#xff0c;我数据库对应的是自增id&#xff0c;但是插入后想获取到这个id去使用。我以为是不可以马上获取的&#xff0c;然后看到 项目进度 购物车&#xff…
阅读更多...
[pyqt5]PyQt5之如何设置QWidget窗口背景图片问题

[pyqt5]PyQt5之如何设置QWidget窗口背景图片问题

目录 PyQt5设置QWidget窗口背景图片 QWidget 添加背景图片问题QSS 背景图样式区别PyQt设置窗口背景图像&#xff0c;以及图像自适应窗口大小变化 总结 PyQt5设置QWidget窗口背景图片 QWidget 添加背景图片问题 QWidget 创建的窗口有时并不能直接用 setStyleSheet 设置窗口部分…
阅读更多...
【学习记录】从0开始的Linux学习之旅——驱动模块编译与加载

【学习记录】从0开始的Linux学习之旅——驱动模块编译与加载

一、概述 Linux操作系统通常是基于Linux内核&#xff0c;并结合GNU项目中的工具和应用程序而成。Linux操作系统支持多用户、多任务和多线程&#xff0c;具有强大的网络功能和良好的兼容性。本文主要讲述如何编译及加载linux驱动模块。 二、概念及原理 应用程序通过系统调用与内…
阅读更多...
软件介绍02- flameshot截图软件（linux系统可用）

软件介绍02- flameshot截图软件（linux系统可用）

1 软件介绍 在Windows和mac平台一直都使用着snipaste截图&#xff0c;非常好用&#xff0c;又能够钉图。遗憾是并没有开发linux版本&#xff0c;真不知道为什么。 好在终于找到一款截图软件&#xff0c;flameshot截图软件&#xff0c;可以平替snipaste。 下载网址&#xff1a;…
阅读更多...
华为eNSP使用教程（Enterprise Network Simulation Platform，企业网络仿真平台）

华为eNSP使用教程（Enterprise Network Simulation Platform，企业网络仿真平台）

文章目录 华为eNSP使用教程详解引言eNSP界面快速入门启动与初始设置主界面组成创建和管理项目 构建网络拓扑添加和连接设备配置设备参数示例&#xff1a;配置设备接口IP 保存配置 仿真网络功能启动与测试示例&#xff1a;测试网络连通性 使用调试工具 疑难技术点解析路由协议配…
阅读更多...
C语言WFC绘制矩形

C语言WFC绘制矩形

代码实现&#xff1a; void CCGDrawingView::Rectangle(int x1, int y1, int x2, int y2, int x3, int y3, int x4, int y4, COLORREF color,CDC* pDC) {CPen redPen(PS_SOLID, 1, color);CBrush redBursh(color);CPen* pOldPen pDC->SelectObject(&redPen);CBrush* p…
阅读更多...
最新文章

Copyright @ 2022~2023