Mysql各种日志管理

文章目录

  • 事务日志
    • 事务日志的记录过程
    • 事务日志类型
    • 事务日志的相关变量
  • 错误日志
  • 二进制日志
    • 功能作用
    • 文件的构成
    • 日志格式
    • 查看日志
    • 删除日志
  • 通用日志
  • 慢查询日志

Mysql日志记录着数据库在运行过程中的各种操作,帮助管理员定位查找问题。

事务日志

事务日志(Transaction log)事务日志的写入类型为“追加”,因此其操作为“顺序IO”;通常也称为:预写式日志write ahead logging事务日志文件:ib_logfile0,  ib_logfile1

事务日志的记录过程

事务日志记录有四个步骤:1.读取数据库文件2.将数据库文件加载到内存中3.将数据库的操作记录到事务日志文件中4.再将内存中的操作写回到数据库文件中
如果第四步时突然断电了,别慌,日志文件已经记录了所有的内存操作,来电后直接在读取日志文件中的记录即可

事务日志类型

redolog和undolog

redo log: 记录某数据块被修改后的值,数据更新前先记录redo log,可以用来恢复未写入data file已成功事务更新的数据的
undo log:保存与执行的操作相反的操作,即记录某数据被修改前的值,可以用来在事务失败时进行回滚rollback。

事务型存储引擎自行管理和使用,建议和数据文件分开存放。

事务日志的相关变量

mysql> show variables like '%innodb_log%';
+------------------------------------+----------+
| Variable_name                      | Value    |
+------------------------------------+----------+
| innodb_log_buffer_size             | 16777216 |
| innodb_log_checksums               | ON       |
| innodb_log_compressed_pages        | ON       |
| innodb_log_file_size               | 50331648 |
| innodb_log_files_in_group          | 2        |
| innodb_log_group_home_dir          | ./       |
| innodb_log_spin_cpu_abs_lwm        | 80       |
| innodb_log_spin_cpu_pct_hwm        | 50       |
| innodb_log_wait_for_flush_spin_hwm | 400      |
| innodb_log_write_ahead_size        | 8192     |
| innodb_log_writer_threads          | ON       |
+------------------------------------+----------+
11 rows in set (0.00 sec)mysql>

错误日志

错误日志是MySQL中最重要的日志之一,它记录了当mysqld启动和停止时,以及服务器在运行过程中发生任何严重错误时的相关信息。
当数据库出现任何故障导致无法正常使用时,建议首先查看此日志。

该日志默认是开启的,默认存放目录/var/log/,默认的日志文件名为mysqld.log

//查看日志位置
mysql> show variables like '%log_error%';
+----------------------------+----------------------------------------+
| Variable_name              | Value                                  |
+----------------------------+----------------------------------------+
| binlog_error_action        | ABORT_SERVER                           |
| log_error                  | /var/log/mysqld.log                    |
| log_error_services         | log_filter_internal; log_sink_internal |
| log_error_suppression_list |                                        |
| log_error_verbosity        | 2                                      |
+----------------------------+----------------------------------------+
5 rows in set (0.03 sec)

二进制日志

二进制日志(binlog)1.记录了所有DDL(数据定义语言)语句和DML(数据操纵语言)语句,但不包括数据查询(select,show...)语句;2.记录已经提交的日志3.不依赖于存储引擎类型

功能作用

功能:通过“重放”日志文件中的事件来生成数据副本

二进制日志的作用: mysql8版本中,二进制日志默认开启的,1.灾难时的数据恢复;2.MySQL的主从复制;

二进制日志的相关参数

mysql> show variables like '%log_bin%';
+---------------------------------+-----------------------------+
| Variable_name                   | Value                       |
+---------------------------------+-----------------------------+
| log_bin                         | ON                          |
| log_bin_basename                | /var/lib/mysql/binlog       |
| log_bin_index                   | /var/lib/mysql/binlog.index |
| log_bin_trust_function_creators | OFF                         |
| log_bin_use_v1_row_events       | OFF                         |
| sql_log_bin                     | ON                          |
+---------------------------------+-----------------------------+
6 rows in set (0.01 sec)

文件的构成

二进制日志文件的构成

由两类文件1.日志文件:/var/lib/mysql/binlog 文件名后缀,二进制格式,会有多个文件,文件名数字递增。2.索引文件:/var/lib/mysql/binlog.index 文本格式,记录当前已有的二进制日志文件列表。

在这里插入图片描述
binlog.index记录当前已有的二进制日志文件列表。
在这里插入图片描述

日志格式

MySQL服务器中提供了多种格式来记录二进制日志

日志格式含义
statement基于sql语句的日志记录,记录的是sql语句,对数据进行修改的sql都会记录在日志文件中。
row基于行的日志记录,记录的是每一行的数据变更。(默认)
mixed混合了statement和row两种格式,默认采用statement,在某些特殊情况下会自动切换为row进行记录。

查看日志格式(默认)

mysql> show variables like '%binlog_format%';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| binlog_format | ROW   |
+---------------+-------+
1 row in set (0.01 sec)

查看日志

由于二进制日志是以二进制方式存储的,不能直接读取,所以需要通过二进制日志查询工具mysqlbinlog来查看,语法如下:

mysqlbinlog [参数选项] logfilename参数选项:-d    指定数据库名称,只列出指定的数据快相关操作。-o    忽略掉日志中的前n行命令-v    将行事件(数据变更)重构为sql语句-w    将行事件(数据变更)重构为sql语句,并输出注释信息

删除日志

对于比较繁忙的业务系统,每天生成的binlog数据巨大,如果长时间不清楚,将会占用大量磁盘空间。可以通过一下几种方式清理日志

指令含义
reset master删除全部binlog日志,删除之后,日志编号从binlog。000001重新开始
purge master logs to ‘binlog.******’删除******编号之前的所有日志
purge master logs before ‘yyyy-mm-dd hh24:mi:ss’删除日志为’yyyy-mm-dd24:mi:ss之前的所有日志’

也可以在mysql的配置文件中配置二进制日志的过期时间,设置了之后,二进制日志过期会自动删除。

查看默认的过期时间,单位2592000秒(30天)

show variables like '%binlog_expire_logs_seconds%';
mysql> show variables like '%binlog_expire_logs_seconds%';
+----------------------------+---------+
| Variable_name              | Value   |
+----------------------------+---------+
| binlog_expire_logs_seconds | 2592000 |
+----------------------------+---------+
1 row in set (0.00 sec)

通用日志

通用日志中记录了客户端的所有操作语句,而二进制日志不包含查询数据的sql语句。默认情况下,查询日志是未开启的。

如果需要开启通用日志,可以设置一下配置

mysql> show variables like '%general%';
+------------------+------------------------------+
| Variable_name    | Value                        |
+------------------+------------------------------+
| general_log      | OFF                          |
| general_log_file | /var/lib/mysql/localhost.log |
+------------------+------------------------------+
2 rows in set (0.02 sec)

修改MySQL的配置文件/etc/my.cnf文件,添加如下内容:

#该选项用来开启查询日志,可选项:0或者1;0代表关闭,1代表开启
general_log=1#设置日志的文件名,如果没有指定,默认的文件名为host_name.log
general_log_file=mysql_query.log

慢查询日志

慢查询日志记录了所有执行时间超过参数long_query_time设置值并且扫描记录数不小于min_examined_row_limit的所有的sql语句的日志,默认未开启。
long_query_time默认为10秒,最小为0,精度可以到微妙。

#开启慢查询日志
slow_query_log=1#执行时间参数
long_query_time=2

默认情况下,慢查询日志不会记录管理语句,也不会记录不使用索引进行查找的的查询。可以使用log_slow_admin_statements和更改次行为为log_queries_not_using_indexes,如下所述

# 记录执行较慢的管理语句
log_slow_admin_statements=1#记录执行较慢的未使用索引的语句
log_queries_not_using_indexes=1

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/774496.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

(原型与原型链)前端八股文修炼Day5

一 原型链的理解 原型链定义: 原型链是 JavaScript 中实现对象继承的关键机制之一,它是一种对象之间的关系,通过这种关系,一个对象可以继承另一个对象的属性和方法。 原型链的组成: 每个对象都有一个指向另一个对象的…

Vue3尚硅谷张天禹笔记

1. Vue3简介 2020年9月18日,Vue.js发布版3.0版本,代号:One Piece(n 经历了:4800次提交、40个RFC、600次PR、300贡献者 官方发版地址:Release v3.0.0 One Piece vuejs/core 截止2023年10月,最…

每日一题 --- 删除链表的倒数第 N 个结点[力扣][Go]

删除链表的倒数第 N 个结点 题目:19. 删除链表的倒数第 N 个结点 给你一个链表,删除链表的倒数第 n 个结点,并且返回链表的头结点。 示例 1: 输入:head [1,2,3,4,5], n 2 输出:[1,2,3,5]示例 2&#x…

zotero+word优化管理参考文献

写论文,整理参考文献,管理参考文献很麻烦,参考文献格式罗列很麻烦,论文需要修改时,重新调整参考文献顺序很麻烦。 zoteroword可以很好的帮助解决这个问题。 Step1 zotero软件安装 默认word你已经安装好了 step2 安…

linux下的打包/解包命令(tar,zip/unzip)

目录 打包/解包 作用 zip -r选项 unzip -d选项 如果不使用递归压缩 -l / -v选项 tar 介绍 选项 示例 打包/解包 作用 使多个文件变成一个文件,不易造成数据缺失使下载时间变短 zip 将目录或文件压缩成zip格式 -r选项 递归式压缩某目录及其所有子目录中的文件 如果不…

有效三角形的个数【双指针】

1.优化版暴力求解 如果能构成三⻆形,需要满⾜任意两边之和要⼤于第三边。实际上只需让较⼩的两条边之和⼤于第三边即可。将原数组排序,从⼩到⼤枚举三元组,这样三层 for 循环枚举出的三元组只需判断较⼩的两条边之和是否⼤于第三边。 class…

Qt开发(2)——在已有VS项目中配置Qt

在之前的Qt开发学习中,基本都是在Qt Creator中创建一个Qt项目,或者即便是在VS中也是直接新建一个Qt项目。但很少有记录如何在已有的C项目中添加Qt,这就好比我有个项目已经开发完了,现在又说加个Qt界面的功能。这篇文章就是记录如何在已有项目…

那如何解决信创设配问题呢?怎么成为信创产品?

信创也好、国产化也好都是国家部署的重点工作,所有涉及到的相关行业和部门都必须坚持执行和并且要执行好的重点任务,这一点无容置疑。在信息化层面,随着我国基础水平(芯片、OS、DB、中间件)的提升,信创工作…

臻奶惠:无人售货奶柜,让纯净营养触手可及

臻奶惠:无人售货奶柜,让纯净营养触手可及 在这个快速发展的时代,每一个创新都在为生活带来便捷和品质的提升。臻奶惠深谙此道,特推出无人售货奶柜,将健康营养与现代科技完美融合,为您和家人提供24小时不间…

如何让笔记本电脑发挥120%的性能?原来还有这种小技巧

前言 现在的笔记本电脑性能真的是越来越好了!但笔记本的CPU终究受到功耗的限制,与同代的台式机CPU性能相差不是一点半点的。 小白在之前很长一段时间也是使用着Windows系统的笔记本,也见过不下百款笔记本。 笔记本为了轻便,通常…

逐步学习Go-并发通道chan(channel)

概述 Go的Routines并发模型是基于CSP,如果你看过七周七并发,那么你应该了解。 什么是CSP? "Communicating Sequential Processes"(CSP)这个词组的含义来自其英文直译以及在计算机科学中的使用环境。 CSP…

SpringBoot整合Swagger-UI实现在线API文档

✅作者简介:大家好,我是Leo,热爱Java后端开发者,一个想要与大家共同进步的男人😉😉🍎个人主页:Leo的博客 💞当前专栏: 循序渐进学SpringBoot ✨特色专栏: MySQL学习 🥭本文内容:SpringBoot整合Swagger-UI实现在线API文档 📚个人知识库: Leo知识库,欢迎大…

YOLOv9改进策略:卷积魔改 | DCNv2升级版本,助力检测

💡💡💡本文改进内容:在DCN的基础上,增加了2个创新点,分别是调制模块和使用多个调制后的DCN模块,从形成了DCN的升级版本——DCNv2 💡💡💡如何使用&#xff1a…

红岩思维导图的制作软件,分享4款热门的!

红岩思维导图的制作软件,分享4款热门的! 在当今信息爆炸的时代,思维导图作为一种有效的知识整理和思维拓展工具,受到了广大用户的青睐。红岩思维导图以其独特的风格和实用性,成为了许多人学习和工作中的得力助手。那么…

【SpringSecurity】基础入门

目录 权限管理什么是权限管理认证授权权限管理解决方案Shiro开发者自定义Spring Security Spring Security特性Spring、Spring Boot 和 Spring Security 三者的关系整体架构1.认证AuthenticationManagerAuthenticationSecurityContextHolder 2.授权AccessDecisionManagerAccess…

作为数据分析师,如何能把AI工具和数据分析工作更好的结合?

在当今信息爆炸的时代,数据已经成为企业、研究机构乃至个人决策的重要依据。然而,如何高效地处理、分析和解读这些数据,从而提炼出有价值的信息,却成为了一个亟待解决的问题。 幸运的是,随着人工智能技术的飞速发展&a…

二叉树|450.删除二叉搜索树中的节点

力扣题目链接 class Solution { public:TreeNode* deleteNode(TreeNode* root, int key) {if (root nullptr) return root; // 第一种情况:没找到删除的节点,遍历到空节点直接返回了if (root->val key) {// 第二种情况:左右孩子都为空&…

【WEEK4】 【DAY5】AJAX第二部分【中文版】

2024.3.22 Friday 接上文【WEEK4】 【DAY4】AJAX第一部分【中文版】 目录 8.4.Ajax异步加载数据8.4.1.新建User.java8.4.2.在pom.xml中添加lombok、jackson支持8.4.3.更改tomcat设置8.4.4.修改AjaxController.java8.4.5.新建test2.jsp8.4.5.1.注意:和WEB-INF平级&…

一文解析:固定电感器结构、作用及其与扼流圈和可变电感器的差异

固定电感器是一种电子元件又称固定线圈,用于在电路中产生固定的电感值。电感是指导致电流变化时产生电动势的能力,通常用亨利(Henry)作为单位。固定电感器的电感值是预先确定的,通常以特定的数值标识,例如1…

【正点原子FreeRTOS学习笔记】————(10)FreeRTOS时间管理

这里写目录标题 一、延时函数介绍(了解)二、延时函数解析(熟悉)三、延时函数演示实验(掌握) 一、延时函数介绍(了解) 相对延时:指每次延时都是从执行函数vTaskDelay()开始…