【MySQL】-日志系统

一、背景介绍

MySQL中提供了各种各样的日志,每一个日志在不同的阶段有不同的作用,对数据的一致性和正确性得到保障,为数据恢复也提供至关重要的作用,那今天我们一起来讨论讨论MySQL中的各个日志


在这里插入图片描述

二、正文

binlog:二进制日志,默认不开启

在这里插入图片描述

作用:
记录所有执行的DDL和DML语句(除了select、show等),便于数据同步以及恢复,哪怕数据丢失也能找到

归属:
mysql的server层

存储位置:
/etc/mysql/mysql.conf.d/

如何开启binlog日志记录?
可以在配置文件中添加或修改以下参数来开启binlog日志
在这里插入图片描述


errorlog:错误日志

作用:
操作出错放在这儿,能够帮助定位MySQL问题
在这里插入图片描述


slowlog:慢查询日志

作用:
给数据库的sql语句设置一个预期执行时间(long_query_time,单位:秒,默认10秒),当sql语句的执行时间超过了预期时间则把这条SQL语句的相关信息记录到慢查询日志中,方便定位哪些查询语句的执行效率低便于后期优化

记录内容:

  • 长时间运行的查询:如果一条查询花费大量时间来完成,那么它可能存在性能问题
  • 高I/O消耗的查询:当查询需要从磁盘上获取大量数据时,它可能对系统造成不必要的负载
  • 未使用索引的查询:没有正确地利用索引将导致全表扫描,效率较低 重复查询:同样的查询多次执行也可能是性能问题的原因之一
  • 错误配置的查询参数:如果查询参数设置不合理,比如内存限制、连接池等,都可能导致查询变得更加缓慢

如何开启慢查询日志?
查询是否开启慢查询日志
在这里插入图片描述
MySQL默认是没有开启慢查询日志,需要在(/et/my.cnf)中配置

使用场景:
预热数据、过大文件、日志记录、延迟加载数据(同步)


relaylog:中继日志

作用:
在进行主从复制的过程中,需要把主服务器的binlog文件内容同步到从服务的relaylog日志从而保持主从服务器的数据一致性。从服务器读取relaylog中的记录并对数据进行更新


归属:
从服务器
参考网上图片


undolog:回滚日志

作用:
记录事务的insert、update、delete操作,记录历史版本的数据,编写的sql语句会生成相反的操作,比方说事务在执行insert语句的时候日志会记录delete,这样的好处是当事务执行失败或者要回滚时,能够快速利用undolog中的信息将数据回滚到修改前的状态


归属:
innodb存储引擎内部


redolog:前滚日志

作用:
当数据被修改时,所有的修改会先写入到redolog日志中,在更新到Buffer Pool,保证了数据不会因为一些外部原因(如:MySQL宕机)而导致数据丢失;当事务在提交的时候,将redolog进行刷盘,如果Mysql宕机或者重启时也可以读取redolog中的数据,从而对数据进行恢复


归属:
innodb存储引擎内部

在这里插入图片描述

内存写磁盘的时候是随机读写的,而由内存写入redolog再写入磁盘的过程是append追加的方式顺序读写的,可以通过redolog机制恢复数据,也叫write ahead log


在前文中讲binlog日志时当进行DDL和DML语句时会写入记录到日志文件,修改数据时会写入记录到redolog日志,屏幕前的你思考一个问题:binlog和redolog同时都会记录数据,那如何保证文件中数据的一致性呢?
这就引申出了两阶段提交的概念

两阶段提交

什么时两阶段提交?
将redo log的写入拆成了两个步骤prepare 和commit,这就是两阶段提交
摘自网上图片


当修改数据时:
先写入redolog日志,给redolog添加一个prepare状态
写入binlog日志
再写redolog,修改状态为commit


数据恢复时:
读取redolog,发现状态为prepare,处于prepare状态的数据是不能用的,
于是读取binlog,查看binlog有没有与之相匹配的数据:
没有,把redolog这条数据删除掉,回顾记录
有,自动把redolog的状态改成commit,更新数据


三、总结

针对各个日志做了简单的介绍,内部更为细节的内容还需要我们结合MySQL的执行流程、内存和磁盘的过渡等微观去详细了解,宏观到微观。



参考博客

https://blog.csdn.net/J080624/article/details/128591262

如果有想要交流的内容欢迎在评论区进行留言,如果这篇文档受到了您的喜欢那就留下你点赞+收藏+评论脚印支持一下博主~

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/192428.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

NIO--07--Java lO模型详解

提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 文章目录 何为 IO?先从计算机结构的角度来解读一下I/o.再从应用程序的角度来解读一下I/O 阻塞/非阻塞/同步/异步IO阻塞IO非阻塞IO异步IO举例 Java中3种常见的IO模型BIO (Blo…

Redis缓存的使用

什么是缓存 缓存就是数据交换的缓冲区,是存储数据的临时地方,一般读写性能较高。 缓存的作用: 降低后端负载提高读写效率,降低响应时间 缓存的成本: 数据一致性成本代码维护成本运维成本 Redis特点 键值型数据库…

C语言之结构体

一.前言引入. 我们知道在C语言中有内置类型,如:整型,浮点型等。但是只有这些内置类 型还是不够的,假设我想描述学⽣,描述⼀本书,这时单⼀的内置类型是不⾏的。描述⼀个学⽣需要名字、年龄、学号、⾝⾼、体…

Spark经典案例分享

Spark经典案例 链接操作案例二次排序案例 链接操作案例 案例需求 数据介绍 代码如下: package base.charpter7import org.apache.hadoop.conf.Configuration import org.apache.hadoop.fs.{FileSystem, Path} import org.apache.spark.SparkContext import org.a…

四、Zookeeper节点类型

目录 1、临时节点 2、永久节点 Znode有两种,分别为临时节点和永久节点。 节点的类型在创建时即被确定,并且不能改变。 1、临时节点 临时节点的生命周期依赖于创建它们的会话。一旦会话结束,临时节点将被自动删除,

OpenCV-Python:计算机视觉介绍

目录 1.背景 2.计算机视觉发展历史 3.计算机视觉主要任务 4.计算机视觉应用场景 5.知识笔记 1.背景 OpenCV是计算机视觉的一个框架,想要学习OpenCV,需要对计算机视觉有一个大致的了解。计算机视觉是指通过计算机技术和算法来模拟人类视觉系统的能力…

Redis高效缓存:加速应用性能的利器

目录 引言 1. Redis概述 1.1 什么是Redis? 1.2 Redis的特点 2. Redis在缓存中的应用 2.1 缓存的重要性 2.2 Redis作为缓存的优势 2.3 缓存使用场景 3. Redis在实时应用中的应用 3.1 实时数据处理的挑战 3.2 Redis的实时数据处理优势 3.3 实时应用中的Red…

mediapipe+opencv实现保存图像中的人脸,抹去其他信息

mediapipeopencv MediaPipe本身不提供图像处理功能,它主要用于检测和跟踪人脸、手势、姿势等。如果您想要从图像中仅提取人脸主要信息并去除其他信息. # codingutf-8 """project: teatAuthor:念卿 刘file: test.pydate&…

Kubernetes学习笔记-Part.09 K8s集群构建

目录 Part.01 Kubernets与docker Part.02 Docker版本 Part.03 Kubernetes原理 Part.04 资源规划 Part.05 基础环境准备 Part.06 Docker安装 Part.07 Harbor搭建 Part.08 K8s环境安装 Part.09 K8s集群构建 Part.10 容器回退 第九章 K8s集群构建 9.1.集群初始化 集群初始化是首…

文章解读与仿真程序复现思路——电网技术EI\CSCD\北大核心《余电上网/制氢方式下微电网系统全生命周期经济性评估》

该标题涉及到对微电网系统的全生命周期经济性进行评估,其重点关注两种运营方式:余电上网和制氢。以下是对标题的解读: 微电网系统: 微电网是指一种小规模的电力系统,通常包括分布式能源资源(如太阳能、风能…

ES通过抽样agg聚合性能提升3-5倍

一直以来,es的agg聚合分析性能都比较差(对应sql的 group by)。特别是在超多数据中做聚合,在搜索的条件命中特别多结果的情况下,聚合分析会非常非常的慢。 一个聚合条件:聚合分析请求的时间 search time a…

部署springboot项目到GKE(Google Kubernetes Engine)

GKE是 Google Cloud Platform 提供的托管 Kubernetes 服务,允许用户在 Google 的基础设施上部署、管理和扩展容器。本文介绍如何部署一个简单的springboot项目到GKE. 本文使用podman. 如果你用的是docker, 只需要把本文中所有命令中的podman替换成docker即可 非H…

java+springboot物资连锁仓库经营商业管理系统+jsp

主要任务:通过网络搜集与本课题相关的素材资料,认真分析连锁经营商业管理系统的可行性和要实现的功能,做好需求分析,确定该系统的主要功能模块,依据数据库设计的原则对数据库进行设计。最后通过编码实现本系统功能并测…

Linux周期任务

我自己博客网站里的文章 Linux周期任务:at和crontab 每个人或多或少都有一些约会或者是工作,有的工作是长期周期性的, 例如: 每个月一次的工作报告每周一次的午餐会报每天需要的打卡…… 有的工作则是一次性临时的&#xff0…

Prometheus+Grafana搭建日志采集

介绍 一、什么是日志数据采集 日志数据采集是指通过各种手段获取应用程序运行时产生的各类日志信息,并将这些信息存储到特定的地方,以便后续分析和使用。通常情况下,这些日志信息包括系统运行状态、错误信息、用户操作记录等等。通过对这些…

牛客算法题 【HJ97 记负均正】 golang实现

题目 HJ97 记负均正 描述 首先输入要输入的整数个数n,然后输入n个整数。输出为n个整数中负数的个数,和所有正整数的平均值,结果保留一位小数。 0即不是正整数,也不是负数,不计入计算。如果没有正数,则平均…

大文件分片上传、分片进度以及整体进度、断点续传(一)

大文件分片上传 效果展示 前端 思路 前端的思路&#xff1a;将大文件切分成多个小文件&#xff0c;然后并发给后端。 页面构建 先在页面上写几个组件用来获取文件。 <body><input type"file" id"file" /><button id"uploadButton…

动态规划学习——回文串

目录 一&#xff0c;回文子串 1.题目 2.题目接口 3&#xff0c;解题代码及其思路 解题代码&#xff1a; 二&#xff0c; 分割回文串II 1&#xff0c;题目 2&#xff0c;题目接口 3&#xff0c;解题思路及其代码 一&#xff0c;回文子串 1.题目 给你一个字符串 s &…

模板初阶(2):函数模板的匹配原则,类模板的实例化

一、函数模板的匹配原则 int Add(const int& x, const int& y) {return x y; }template <class T> T Add(const T& x, const T& y) {return x y; }int main() {int a1 1, a2 2;Add(a1, a2);double d1 1.1, d2 2.2;Add(d1, d2);return 0; }一个非模…