mysql数据库调优篇章1--日志篇

目录

  • 1.认识数据库中日志的作用
  • 2.增加mysql数据库中my.ini 基本配置
  • 3.增加my.ini中参数配置
  • 4.查看已经执行过的sql语句过去执行时间
  • 5.找出慢查询的sql
  • 6.常用参数查询命令
  • 7.认识慢查询日志记录
  • 8.认识通用日志记录（记录增删改查操作）
  • 9.认识二进制文件binlog主要应用场景
  • 10.总结

SHOW VARIABLES LIKE ‘innodb_read_io_threads’;
SHOW VARIABLES LIKE ‘innodb_write_io_threads’;
SHOW VARIABLES LIKE ‘thread_cache_size’;
SHOW VARIABLES LIKE ‘innodb_buffer_pool_size’;
show global status like ‘Thread%’;

1.认识数据库中日志的作用

  • 慢查询日志：记录所有执行时间超过long_query_time的所有查询，方便我们对查询进行优化。
  • 通用查询日志：记录所有连接的起始时间和终止时间，以及连接发送给数据库服务器的所有指令， 对我们复原操作的实际场景、发现问题，甚至是对数据库操作的审计都有很大的帮助。
  • 错误日志：记录MySQL服务的启动、运行或停止MySQL服务时出现的问题，方便我们了解服务器的 状态，从而对服务器进行维护。
  • 二进制日志：记录所有更改数据的语句，可以用于主从服务器之间的数据同步，以及服务器遇到故 障时数据的无损失恢复。
  • 中继日志：用于主从服务器架构中，从服务器用来存放主服务器二进制日志内容的一个中间文件。 从服务器通过读取中继日志的内容，来同步主服务器上的操作。
  • 数据定义语句日志：记录数据定义语句执行的元数据操作。

2.增加mysql数据库中my.ini 基本配置

查询这些变量
show VARIABLES like ‘%slow%’
show variables like ‘%log_bin%’;

# 配置mysql数据库存储数据的位置
datadir=E:/MySQL/Data
default_authentication_plugin=mysql_native_password
default-storage-engine=INNODB
# Set the SQL mode to strict
sql-mode="STRICT_TRANS_TABLES,NO_ENGINE_SUBSTITUTION"log-output=FILE
#开启通用查询日志记录 会记录SELECT、INSERT、UPDATE、DELETE 等操作
general-log=1
general_log_file="C:\ProgramData\MySQL\MySQL Server 8.0\Mytest-generaltest.log"
#开启慢查询日志  但是内存储  建议关闭  
slow-query-log=1
# 执行时间超过了这个10s阈值 
long_query_time=10
#指定慢查询日志中时间戳的格式。
log_timestamps = system
#指定慢查询日志文件路径
slow_query_log_file="C:\ProgramData\MySQL\MySQL Server 8.0\Mytest-slow.log"
# 开启记录错误日志
log-error="C:\ProgramData\MySQL\MySQL Server 8.0\Mytest-Err.err"
# Binary Logging.
#默认开启二进制日志文件  数据库默认开启的当数据库中的数据发生变化时，MySQL 会将这些变更操作记录到二进制日志中，以便于数据恢复、主从复制等操作。
log-bin="xxxxx-xxxx-bin"

3.增加my.ini中参数配置

观察字段QUERY_SAMPLE_TEXT 具体sql执行语句
thread_cache_size 参数用于设置线程缓存的大小，它指定了服务器为处理客户端连接请求而预先分配的线程数目。
查询 show global status like ‘Threads_connected%’; 结果是525 峰值达到了500多，但是thread_cache_size才设置300，所以需要增加 数量，减少Threads_created 创建的数量
查询SHOW STATUS LIKE ‘Threads_connected’;结果的2倍或3倍

thread_cache_size=300

指定在 MySQL 服务器接受新连接之前，允许在内核连接队列中等待的连接数目。它控制着 MySQL 服务器能够处理的最大连接数。

back_log=600

查询最大连接数，my.ini 中没有 max_connections参数，默认是151 ，可以手动配置
SHOW VARIABLES LIKE ‘max_connections’;

max_connections=1000

InnoDB 存储引擎的参数，用于配置数据库系统中读取和写入数据时所使用的 I/O 线程数量。
SHOW VARIABLES LIKE ‘innodb_read_io_threads’;
SHOW VARIABLES LIKE ‘innodb_write_io_threads’;
一般是当前服务器CPU核心数量的一半

innodb_read_io_threads = 8
innodb_write_io_threads = 8

查询 show global status like ‘Thread%’;
在这里插入图片描述
发现 Threads_created 记录的是数据库开启后一共创建的线程较多，说明 thread_cache_size设置的小了

thread_cache_size = 500

4.查看已经执行过的sql语句过去执行时间

SHOW VARIABLES LIKE ‘performance_schema’; 看是否开启
SELECT * FROM performance_schema.events_statements_summary_by_digest;
观察字段SCHEMA sql执行具体数据库名称
观察字段QUERY_SAMPLE_SEEN sql执行起始时间
观察字段 DIGEST_TEXT sql执行信息摘要
观察字段QUERY_SAMPLE_TEXT 具体sql执行语句
TIMER_WAIT：表示该 SQL 语句摘要的总执行时间（秒）。
LOCK_TIME：表示该 SQL 语句摘要在等待表锁上的时间（秒）。
QUERY_TIME：表示该 SQL 语句摘要的总查询时间（秒），包括等待时间。

5.找出慢查询的sql

找出执行时间较长的sql，设置sql

SHOW VARIABLES LIKE 'slow_query_log';

6.常用参数查询命令

SHOW VARIABLES;
show variables like 'profiling';

7.认识慢查询日志记录

# Time: 2024-05-09T15:10:58.145015+08:00
# User@Host: root[root] @ WIN-TLGUR8CSAR [192.168.1.2]  Id: 647518
# Query_time: 12.184095  Lock_time: 0.000198 Rows_sent: 213727  Rows_examined: 213727
use testbase;
SET timestamp=1715238717;
SELECT *  FROM `user`;

8.认识通用日志记录（记录增删改查操作）

2024-05-09T15:40:57.489468+08:00 7 Connect
2024-05-09T15:40:57.489592+08:00 7 Query SELECT @@skip_networking, @@skip_name_resolve, @@have_ssl=‘YES’, @@ssl_key, @@ssl_ca, @@ssl_capath, @@ssl_cert, @@ssl_cipher, @@ssl_crl, @@ssl_crlpath, @@tls_version
2024-05-09T15:40:57.490856+08:00 7 Quit
2024-05-09T15:41:34.690494+08:00 8 Connect root@localhost on using TCP/IP
2024-05-09T15:41:34.690780+08:00 8 Query SET NAMES utf8mb4
2024-05-09T15:41:34.691133+08:00 8 Init DB packing_test
2024-05-09T15:41:34.691212+08:00 8 Query SET PROFILING = 1
2024-05-09T15:41:34.691420+08:00 8 Query SHOW STATUS
2024-05-09T15:53:46.319141+08:00 12 Query SELECT COUNT(*) FROM performance_schema.threads

9.认识二进制文件binlog主要应用场景

在这里插入图片描述

10.总结

根据慢查询sql排查出查询时间较长的sql，导致长时间占用cpu
分析sql是否全查、是否索引失效、是否mysql参数配置是否合理，是否硬件资源不够用

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/diannao/9828.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

一文了解spring事务特性

一文了解spring事务特性

推荐工具 objectlog 对于重要的一些数据，我们需要记录一条记录的所有版本变化过程，做到持续追踪，为后续问题追踪提供思路。objectlog工具是一个记录单个对象属性变化的日志工具,工具采用spring切面和mybatis拦截器相关技术编写了api依赖包&a…
阅读更多...
数据结构学习/复习12

数据结构学习/复习12

一、排序概念与应用 二、插入排序 三、希尔排序 当间隔数为1时则为插入排序 1.一组一组排 2.多组并排 3.间隔数变化直至为1 四、性能测速代码
阅读更多...
Java类加载器介绍

Java类加载器介绍

在Java中，类加载器是一种动态加载类的机制，它负责在运行时查找、加载和链接类文件。当Java应用程序需要创建某个类的对象时，类加载器会在运行时查找该类对应的.class文件，并将其加载到Java虚拟机中。Java类加载器通常分为三层&…
阅读更多...
【Android】Kotlin学习之数据容器(数组for循环遍历)

【Android】Kotlin学习之数据容器(数组for循环遍历)

数组遍历 1. for ( item in arr){…} 2. for ( i in arr.indeces ) {…} (遍历下标) 3. for ((index, item) in arr.withInfex()) {…} (遍历下标和元素) 4. arr.forEach {} ( 遍历元素 ) 5. arr.forEachIndexed{index, item -> …}
阅读更多...
Python尝试安装 pyaudio 时遇到的错误信息表示安装过程失败，原因是找不到 Python.h 头文件

Python尝试安装 pyaudio 时遇到的错误信息表示安装过程失败，原因是找不到 Python.h 头文件

环境： Python 3.8.10 WSL2 问题描述： 尝试安装 pyaudio 时遇到的错误信息表示安装过程失败，原因是找不到 Python.h 头文件 error: subprocess-exited-with-error Building wheel for pyaudio (pyproject.toml) did not run successfully…
阅读更多...
大模型微调之 在亚马逊AWS上实战LlaMA案例（七）

大模型微调之 在亚马逊AWS上实战LlaMA案例（七）

大模型微调之 在亚马逊AWS上实战LlaMA案例（七） 微调SageMaker JumpStart上的LLaMA 2模型 这是在us-west-2的测试结果。 展示了如何使用SageMaker Python SDK部署预训练的Llama 2模型，并将其微调到你的数据集，用于领域适应或指令…
阅读更多...
【Nginx】如何在 Nginx 中阻止来自特定国家的 IP 地址访问

【Nginx】如何在 Nginx 中阻止来自特定国家的 IP 地址访问

文章目录 前言一、准备工作二、查看 Nginx 服务器都拥有哪些模块2.1 先查看本地nginx是否有ngx_http_geoip2模块2.2 安装nginx并配置ngx_http_geoip2模块2.2.1下载所需版本的nginx到服务器2.2.2 先安装所需依赖2.2.3 解压文件2.2.4 下载ngx_http_geoip2模块2.2.5 编译安装nginx…
阅读更多...
通用型产品发布解决方案（后端环境搭建）

通用型产品发布解决方案（后端环境搭建）

文章目录 后端renren脚手架配置1.解压后放到项目目录下2.新建商品模块1.创建一个新模块 sunliving-commodity2.删除两个不必要的文件3.pom.xml 引入依赖 3.maven进行聚合管理1.将刚才配置的pom.xml文件复制到父项目下并进行修改2.手动将这个pom.xml加入项目（如果右下…
阅读更多...
算法设计与分析 动态规划/回溯

算法设计与分析 动态规划/回溯

1.最大子段和 int a[N]; int maxn(int n) {int tempa[0];int ans0;ansmax(temp,ans);for(int i1;i<n;i){if(temp>0){tempa[i];}else tempa[i];ansmax(temp,ans);}return ans; } int main() {int n,ans0;cin>>n;for(int i0;i<n;i) cin>>a[i];ansmaxn(n);co…
阅读更多...
H5 处理点击元素高亮、自定义按钮、去除焦点边框

H5 处理点击元素高亮、自定义按钮、去除焦点边框

1、设置移动设备上点击元素时出现的高亮颜色 *{-webkit-tap-highlight-color: transparent; }2、如果你想要自定义按钮的样式&#xff0c;你可以使用 -webkit-appearance: none; 来移除按钮的默认样式 .button {-webkit-appearance: none;appearance: none; /* 兼容性更好的通…
阅读更多...
光检测器——光纤通信学习笔记七

光检测器——光纤通信学习笔记七

光检测器 光检测器的基本介绍 作用&#xff1a;把接受到的光信号转换成电信号 光接收器的灵敏度、光源的发光功率和光纤的损耗三者决定了光纤通信的传输距离&#xff1b; 光电二极管 光电转换的基本原理 之前提到&#xff0c;PN结由于内部载流子的扩散运动形成了内部电场&…
阅读更多...
Hive Windows Functions 窗口函数

Hive Windows Functions 窗口函数

Hive Windows Functions 窗口函数 在 Hive 中&#xff0c;窗口函数&#xff08;Window Functions&#xff09;用于在查询结果中执行聚合、排序和分析操作&#xff0c;而无需将数据分组。窗口函数允许你在查询结果中的一组行上执行计算&#xff0c;而不会改变原始数据的行数&am…
阅读更多...
Vue3知识总结-1

Vue3知识总结-1

前面学习一段时间的前端&#xff0c;但是没有进行过太多的练习&#xff0c;并且对于里面一些重要的知识点也没有去着重的记忆&#xff0c;所以打算在学习Vue3的时候&#xff0c;做一些笔记&#xff0c;方便后面翻看。这个笔记会对于学习一些做一些&#xff0c;而不是一个整体的…
阅读更多...
前端之深拷贝

前端之深拷贝

前提&#xff1a; 就是在实际开发中&#xff0c;我有一个编辑的弹窗&#xff0c;可以查看和编辑&#xff0c;因为弹窗里面是一个步骤条&#xff0c;点击下一步就要向对应的接口发送请求&#xff0c;考虑到就比如我点击下一步&#xff0c;此次表箱信息其实不需要修改&#xff0…
阅读更多...
推荐 6 个超好用的 iterm2 zsh 插件

推荐 6 个超好用的 iterm2 zsh 插件

大家好啊&#xff0c;今天给大家分享几个我日常使用的 iterm2 插件&#xff0c;每一个都很有用&#xff0c;希望能给帮助你提高使用命令行的效率&#xff5e; zsh-autosuggestions 插件地址&#xff1a;https://github.com/zsh-users/zsh-autosuggestions 效果展示 当你输入…
阅读更多...
AI中转站计费平台系统源码一站式解决方案安装说明

AI中转站计费平台系统源码一站式解决方案安装说明

AI中转站计费平台系统源码一站式解决方案安装说明 功能 | Features AI 联网功能 AI online searching service 多账户均衡负载 Multi-account load balancing HTTP2 Stream 实时响应功能 HTTP2 Stream real-time response function 节流和鉴权体系 Throttling and authenticati…
阅读更多...
【17-Ⅱ】Head First Java 学习笔记

【17-Ⅱ】Head First Java 学习笔记

HeadFirst Java 本人有C语言基础&#xff0c;通过阅读Java廖雪峰网站&#xff0c;简单速成了java&#xff0c;但对其中一些入门概念有所疏漏&#xff0c;阅读本书以弥补。 第一章 Java入门 第二章 面向对象 第三章 变量 第四章 方法操作实例变量 第五章 程序实战 第六章 Java…
阅读更多...
开源代码分享(28)-含分布式光伏的配电网集群划分和集群电压协调控制

开源代码分享(28)-含分布式光伏的配电网集群划分和集群电压协调控制

参考文献&#xff1a; [1] Chai Y , Guo L , Wang C ,et al.Network Partition and Voltage Coordination Control for Distribution Networks With High Penetration of Distributed PV Units[J].IEEE Transactions on Power Systems, 2018:3396-3407.DOI:10.1109/TPWRS.2018…
阅读更多...
基于微信小程序的校园二手交易平台设计与实现(论文+源码)_kaic

基于微信小程序的校园二手交易平台设计与实现(论文+源码)_kaic

基于微信小程序的校园二手交易平台 设计与实现 摘 要 随着绿色低碳消费和循环经济的理念越来越深入人心,大学生二手商品市场发展迅猛&#xff0c;而大部分二手交易平台运输方式与收售方式对于大学生用户群体并不适用&#xff0c;所以急需一款针对大学生二手商品交易的软件&…
阅读更多...
搜索的未来：OpenAI 的 GPT 如何彻底改变行业

搜索的未来：OpenAI 的 GPT 如何彻底改变行业

搜索的未来&#xff1a;OpenAI 的 GPT 如何彻底改变行业 概述 搜索引擎格局正处于一场革命的风口浪尖&#xff0c;而 OpenAI 的 GPT 处于这场变革的最前沿。最近出现了一种被称为“im-good-gpt-2-chatbot”的神秘聊天机器人&#xff0c;以及基于 ChatGPT 的搜索引擎的传言&am…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023