数据库高级知识——查询截取分析(一)

文章目录

    • 1.慢查询日志
      • 1.1 慢查询日志是什么
      • 1.2 慢查询日志的操作
      • 1.3 日志分析工具mysqldumpslow
    • 2.批量数据脚本

1.慢查询日志

1.1 慢查询日志是什么

MySQL的慢查询日志是MySQL提供的一种日志记录,它用来记录在MySQL中响应时间超过阀值的语句,
具体指运行时间超过long_query_time值的SQL,则会被记录到慢查询日志中。具体指运行时间超过long_query_time值的SQL,则会被记录到慢查询日志中。
long_query_time的默认值为10,意思是运行10秒以上的语句。由他来查看哪些SQL超出了我们的最大忍耐时间值,比如一条sql执行超过5秒钟,我们就算慢SQL,
希望能收集超过5秒的sql,结合之前explain进行全面分析。

1.2 慢查询日志的操作

1.说明

Ubuntu20.04+MySQL8.0.25的配置文件
/etc/mysql
/etc/mysql/mysql.conf.d默认情况下,MySQL数据库没有开启慢查询日志,需要我们手动来设置这个参数。当然,如果不是调优需要的话,一般不建议启动该参数,因为开启慢查询日志会或多或少带来一定的性能影响。
慢查询日志支持将日志记录写入文件

2.查看是否开启及如何开启
查看:

mysql> SHOW VARIABLES LIKE '%slow_query_log%';
+---------------------+----------------------------------------------+
| Variable_name       | Value                                        |
+---------------------+----------------------------------------------+
| slow_query_log      | OFF                                          |
| slow_query_log_file | /var/lib/mysql/zhaoxr-ThinkPad-E450-slow.log |
+---------------------+----------------------------------------------+
2 rows in set (0.01 sec)
默认情况下slow_query_log的值为OFF,表示慢查询日志是禁用的,
可以通过设置slow_query_log的值来开启

开启:

mysql> set global slow_query_log=1;
Query OK, 0 rows affected (0.00 sec)
mysql> SHOW VARIABLES LIKE '%slow_query_log%';
+---------------------+----------------------------------------------+
| Variable_name       | Value                                        |
+---------------------+----------------------------------------------+
| slow_query_log      | ON                                           |
| slow_query_log_file | /var/lib/mysql/zhaoxr-ThinkPad-E450-slow.log |
+---------------------+----------------------------------------------+
2 rows in set (0.01 sec)
使用set global slow_query_log=1开启了慢查询日志只对当前数据库生效,
如果MySQL重启后则会失效。如果要永久生效,就必须修改配置文件/etc/mysql/mysql.conf.d/mysqld.cnf(其它系统变量也是如此)修改slow_query_log 和slow_query_log_file后,然后重启MySQL服务器。 
slow_query_log =1
slow_query_log_file=/var/lib/mysql/atguigu-slow.log关于慢查询的参数slow_query_log_file ,它指定慢查询日志文件的存放路径,系统默认会给一个缺省的文件host_name-slow.log(如果没有指定参数slow_query_log_file的话)

3.那么开启了慢查询日志后,什么样的SQL才会记录到慢查询日志里面呢?

这个是由参数long_query_time控制,MySQL8.0.25默认情况下long_query_time的值为10秒,
查看命令:
mysql> SHOW VARIABLES LIKE 'long_query_time%';
+-----------------+-----------+
| Variable_name   | Value     |
+-----------------+-----------+
| long_query_time | 10.000000 |
+-----------------+-----------+
1 row in set (0.01 sec)
可以使用命令修改,也可以在/etc/mysql/mysql.conf.d/mysqld.cnf参数里面修改。假如运行时间正好等于long_query_time的情况,并不会被记录下来。也就是说,
在mysql源码里是判断大于long_query_time,而非大于等于。
查询当前系统中有多少条慢查询记录
mysql> show global status like '%Slow_queries%';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| Slow_queries  | 0     |
+---------------+-------+
1 row in set (0.01 sec)

1.3 日志分析工具mysqldumpslow

1.查看mysqldumpslow的帮助信息

mysqldumpslow --help

s: 是表示按照何种方式排序;
c: 访问次数
l: 锁定时间
r: 返回记录
t: 查询行数
al:平均锁定时间
ar:平均返回记录数
at:平均查询时间
t:即为返回前面多少条的数据;
g:后边搭配一个正则匹配模式,大小写不敏感的;

2.常用语法

得到返回记录集最多的10个SQL
mysqldumpslow -s r -t 10 /var/lib/mysql/atguigu-slow.log

得到访问次数最多的10个SQL
mysqldumpslow -s c -t 10 /var/lib/mysql/atguigu-slow.log

得到按照时间排序的前10条里面含有左连接的查询语句
mysqldumpslow -s t -t 10 -g “left join” /var/lib/mysql/atguigu-slow.log

另外建议在使用这些命令时结合 | 和more 使用 ,否则有可能出现爆屏情况
mysqldumpslow -s r -t 10 /var/lib/mysql/atguigu-slow.log | more

2.批量数据脚本

1.建表

# 新建库
create database bigData;
use bigData;#1 建表dept
CREATE TABLE dept(  
id INT UNSIGNED PRIMARY KEY AUTO_INCREMENT,  
deptno MEDIUMINT UNSIGNED NOT NULL DEFAULT 0,   
dname VARCHAR(20) NOT NULL DEFAULT "",  
loc VARCHAR(13) NOT NULL DEFAULT ""  
) ENGINE=INNODB DEFAULT CHARSET=UTF8 ;  #2 建表emp
CREATE TABLE emp  
(  
id INT UNSIGNED PRIMARY KEY AUTO_INCREMENT,  
empno MEDIUMINT UNSIGNED NOT NULL DEFAULT 0, /*编号*/  
ename VARCHAR(20) NOT NULL DEFAULT "", /*名字*/  
job VARCHAR(9) NOT NULL DEFAULT "",/*工作*/  
mgr MEDIUMINT UNSIGNED NOT NULL DEFAULT 0,/*上级编号*/  
hiredate DATE NOT NULL,/*入职时间*/  
sal DECIMAL(7,2) NOT NULL,/*薪水*/  
comm DECIMAL(7,2) NOT NULL,/*红利*/  
deptno MEDIUMINT UNSIGNED NOT NULL DEFAULT 0 /*部门编号*/  
)ENGINE=INNODB DEFAULT CHARSET=UTF8 ; 

2.设置参数log_bin_trust_function_creators

创建函数,假如报错:This function has none of DETERMINISTIC......
# 由于开启过慢查询日志,因为我们开启了 bin-log, 我们就必须为我们的function指定一个参数。show variables like 'log_bin_trust_function_creators';set global log_bin_trust_function_creators=1;# 这样添加了参数以后,如果mysqld重启,上述参数又会消失

3.创建函数,保证每条数据都不同
随机产生字符串

DELIMITER $$
CREATE FUNCTION rand_string(n INT) RETURNS VARCHAR(255)
BEGIN    ##方法开始DECLARE chars_str VARCHAR(100) DEFAULT   'abcdefghijklmnopqrstuvwxyzABCDEFJHIJKLMNOPQRSTUVWXYZ'; ##声明一个 字符窜长度为 100 的变量 chars_str ,默认值 DECLARE return_str VARCHAR(255) DEFAULT '';DECLARE i INT DEFAULT 0;
##循环开始WHILE i < n DO  SET return_str =CONCAT(return_str,SUBSTRING(chars_str,FLOOR(1+RAND()*52),1));
##concat 连接函数  ,substring(a,index,length) 从index处开始截取SET i = i + 1;END WHILE;RETURN return_str;
END $$#假如要删除
#drop function rand_string;

随机产生部门编号

#用于随机产生部门编号
DELIMITER $$
CREATE FUNCTION rand_num( ) 
RETURNS INT(5)  
BEGIN   DECLARE i INT DEFAULT 0;  SET i = FLOOR(100+RAND()*10);  
RETURN i;  END $$#假如要删除
#drop function rand_num;

4.创建存储过程
创建往emp表中插入数据的存储过程

DELIMITER $$
CREATE PROCEDURE insert_emp10000(IN START INT(10),IN max_num INT(10))  
BEGIN  
DECLARE i INT DEFAULT 0;   
#set autocommit =0 把autocommit设置成0  ;提高执行效率SET autocommit = 0;    REPEAT  ##重复SET i = i + 1;  INSERT INTO emp10000 (empno, ename ,job ,mgr ,hiredate ,sal ,comm ,deptno ) VALUES ((START+i) ,rand_string(6),'SALESMAN',0001,CURDATE(),FLOOR(1+RAND()*20000),FLOOR(1+RAND()*1000),rand_num());  UNTIL i = max_num   ##直到  上面也是一个循环END REPEAT;  ##满足条件后结束循环COMMIT;   ##执行完成后一起提交END $$#删除
# DELIMITER ;
# drop PROCEDURE insert_emp;

创建往dept表中插入数据的存储过程

#执行存储过程,往dept表添加随机数据
DELIMITER $$
CREATE PROCEDURE insert_dept(IN START INT(10),IN max_num INT(10))  
BEGIN  
DECLARE i INT DEFAULT 0;   SET autocommit = 0;    REPEAT  SET i = i + 1;  INSERT INTO dept (deptno ,dname,loc ) VALUES (START +i ,rand_string(10),rand_string(8));  UNTIL i = max_num  END REPEAT;  COMMIT;  END $$ #删除
# DELIMITER ;
# drop PROCEDURE insert_dept;

5.调用存储过程
dept

DELIMITER ;
CALL insert_dept(100,10); 

emp

#执行存储过程,往emp表添加50万条数据
DELIMITER ;    #将 结束标志换回 ;
CALL insert_emp(100001,500000); CALL insert_emp10000(100001,10000); 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/483137.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Git missing Change-Id in commit message footer解决方法

Git missing Change-Id in commit message footer解决方法在Git向服务器提交代码时&#xff0c;出现如下错误missing Change-Id in commit message footer1原因&#xff1a;项目仓库.git/hooks目录下&#xff0c;commit-msg文件缺失。解决方法1&#xff1a;一般在提交代码报错时…

数据库高级知识——查询截取分析(二)

文章目录3.Show Profile3.1 show profile是什么3.2 分析步骤4.全局查询日志4.1配置启用4.2编码启用3.Show Profile 3.1 show profile是什么 show profile是mysql提供可以用来分析当前会话中语句执行的资源消耗情况。可以用于SQL的调优的测量 默认情况下&#xff0c;参数处于关…

郭瑞东 | 如何制造更聪明的人工智能?让人工生命在复杂环境中进化

来源:集智俱乐部作者:郭瑞东我们都知道大脑是控制身体的中枢&#xff0c;或者夸张点说&#xff0c;身体只是大脑的傀儡。然而事实果真如此吗&#xff1f;认知科学指出&#xff0c;人类并不总是“先知后行”&#xff0c;很多时候也会“先行后知”&#xff0c;身体在塑造精神方面…

移位运算

有无符号数差异&#xff1a; 左移只有逻辑左移&#xff0c;即低位依次补&#xff1a;0&#xff1b; 右移&#xff1a; 无符号数 逻辑右移&#xff08;高位依次补&#xff1a;0&#xff09; 有符号数 算术右移&#xff08;高位依次补&#xff1a;最高符号位&#xff09; 当…

行业观察 | 机器人Ameca挣脱「灵魂」枷锁觉醒?

来源&#xff1a;新智元编辑&#xff1a;小咸鱼 桃子或许你根本不敢想像机器人真正苏醒时的样子。活动肩骨后&#xff0c;突然间灵魂附体&#xff0c;大梦初醒般睁开双眼。先是紧皱眉头&#xff0c;后是做出惊讶不已的表情&#xff0c;让人不得不惊呼《西部世界》来了...「我是…

数据结构与算法——二分查找与二叉排序树

文章目录1.预备知识1.1 题目目录1.2 二分查找1.3 递归二分查找1.4 循环二分查找1.5 二叉查找&#xff08;排序&#xff09;树1.6 二叉搜索树的代码实现2.搜索插入位置2.1 题目描述2.2 C代码实现3.区间查找3.1 题目描述3.2 算法思路3.3 C代码实现4.旋转数组查找4.1 题目描述4.2 …

Django-C001-快速入门

此文章完成度【100%】留着以后忘记的回顾。多写多练多思考&#xff0c;我会努力写出有意思的demo&#xff0c;如果知识点有错误、误导&#xff0c;欢迎大家在评论处写下你的感想或者纠错。 Django Django是一个开放源码的Web应用框架&#xff0c;由Python写成&#xff0c;采用M…

日常小问题汇总(1)

文章目录1.ubuntu桌面设置没反应1.ubuntu桌面设置没反应 重新安装Ubuntu桌面sudo apt-get install ubuntu-desktop

Nature子刊:吃得越少,活得越久

来源&#xff1a;六六脑我们如何才能在年老体迈时保持健康和尽可能延长寿命&#xff1f;现在&#xff0c;研究衰老的科学家们已经给出了简单的答案&#xff1a;少吃点儿&#xff01;常言道&#xff0c;千金难买老来瘦。的确&#xff0c;经验与科学实验都告诉我们&#xff0c;成…

sql.xml大于小于号处理的方法

<if test"startTime ! null and startTime ! ">AND i_DataTime <![CDATA[ > ]]> #{startTime}</if> 相当于&#xff1a; AND i_DataTime > #{startTime} 转载于:https://www.cnblogs.com/MagicAsa/p/11052628.html

数据库高级知识——MySql锁机制

文章目录1.概述1.1 定义1.2 锁的分类2.三锁2.1 表锁(偏读)2.2 行锁(偏写)2.3 页锁1.概述 1.1 定义 锁是计算机协调多个进程或线程并发访问某一资源的机制。在数据库中&#xff0c;除传统的计算资源&#xff08;如CPU、RAM、I/O等&#xff09;的争用以外&#xff0c;数据也是一…

最早的神经元从何而来?海绵基因图谱揭示神经系统起源

来源&#xff1a; 集智俱乐部作者&#xff1a;Viviane Callier译者&#xff1a;陈斯信 审校&#xff1a;梁金 编辑&#xff1a;邓一雪 导语海绵是动物生命演化树上最早的分支谱系之一&#xff0c;它们身体构造简单&#xff0c;却拥有许多与人类和其它复杂生物相同的基因。11月…

CreateFile

import org.apache.hadoop.conf.*; import org.apache.hadoop.fs.*;import java.io.IOException; import java.net.URI; import java.net.URISyntaxException; /**** 注意&#xff1a;文件创建时&#xff0c;可能会报Permission denied错误&#xff0c;其中一个解决办法是 给要…

数据库高级知识——主从复制

文章目录1.复制的基本原理1.1 复制的原理和步骤2.复制的基本原则3.复制的最大问题4.一主一从常见配置4.1 主机修改my.ini配置文件4.2 从机修改my.cnf配置文件4.3 重启和关闭防火墙4.4 在Windows主机上建立帐户并授权slave4.5 在Linux从机上配置需要复制的主机4.6 关闭1.复制的基…

FrostSulliven最新发布引领全球增长的60大技术

来源&#xff1a;必达智库图片来源&#xff1a;网络沙利文特别推出“引领全球增长的60大技术”报告&#xff0c;该报告涵盖了环境与可持续发展、能源与公共事业、化学与新型材料、信息与通信技术、高端制造与自动化、传感器和仪器设备、健康领域、医疗器械与影响以及微电子等九…

GitHub基础——下载和上传

文章目录1.下载2.上传2.1 新建一个仓库2.2 上传2.3 拖拽1.下载 1.进入要下载的文件夹 2.右键&#xff0c;Git Bash Here&#xff0c;进入git bash 3.输入下载命令 19072LAPTOP-688SMNV8 MINGW64 /f/github download/设计模式 $ git clone https://github.com/rhyspang/CPP-De…

引导直觉解决数学猜想难题,DeepMind登上《Nature》封面

来源&#xff1a;机器之心编辑&#xff1a;nhyilin多年来&#xff0c;数学家们一直使用计算机来生成数据以帮助搜索数学模式&#xff0c;这种被称为实验数学的研究方法产生出许多重要的猜想&#xff0c;例如BSD猜想。虽然这种方法已经取得成功并且相当普遍&#xff0c;但从这些…

Centos6.5硬盘故障修复

以企业Centos6.5Linux为案例来修复系统&#xff0c;步骤如下&#xff1a; &#xff08;1&#xff09;远程备份本地其他重要数据&#xff0c;出现只读文件系统&#xff0c;需要先备份其他重要数据基于rsync|scp远程备份&#xff0c;其中/data为源目录&#xff0c;/data/backup/2…

设计模式——简介

文章目录1.设计模式的介绍2.设计模式的分类1.设计模式的介绍 设计模式最核心的作用的是&#xff1a;应对变化&#xff0c;提高复用。 现代软件设计的特征是“需求的频繁变化”。 设计模式的要点是&#xff1a;寻找变化点&#xff0c;然后在变化点处应用设计模式&#xff0c;从…

认知AI的兴起:2025年AI将会发生质的飞跃

来源&#xff1a; Gadi Singer自 1956 年 AI 的概念首次被提出&#xff0c;至今已有 60 多年的发展史。如今&#xff0c;随着相关理论和技术的不断革新&#xff0c;AI 在数据、算力和算法 “三要素” 的支撑下越来越多地走进我们的日常生活。但是&#xff0c;这一系列惊喜的背后…