Mysql语句性能优化

SQL查询过程

在这里插入图片描述

  • 查询缓存: 执行查询语句的时候,会先查询缓存(MySQL 8.0 版本后移除,因为这个功能不太实用)。
  • 分析器: 没有命中缓存的话,SQL 语句就会经过分析器,分析器说白了就是要先看你的 SQL 语句要干嘛,再检查你的 SQL 语句语法是否正确。
  • 优化器: 按照 MySQL 认为最优的方案去执行。
  • 执行器: 执行语句,然后从存储引擎返回数据。 执行语句之前会先判断是否有权限,如果没有权限的话,就会报错。
  • 插件式存储引擎:主要负责数据的存储和读取,采用的是插件式架构,支持 InnoDB、MyISAM、Memory 等多种存储引擎。

创建高性能索引

什么是索引

数据库表中的一种数据结构,用于加速数据检索。通过创建索引,数据库可以更快速地找到所需的数据,而不需要扫描整个表。

为什么需要索引

MySQL 索引优化是提高数据库查询性能的重要手段。索引可以显著减少数据库需要扫描的数据量,从而加快查询速度。但索引的使用和管理也需要谨慎,错误的索引策略可能会导致性能下降或增加维护成本。

索引原理

数据结构:

  • B+ 树:MySQL 的默认索引结构是 B+ 树,它是一种自平衡的树数据结构。B+ 树的每个节点包含多个键值和指向子节点的指针。B+ 树的叶子节点还包含数据指针或者数据行的 ID(在聚簇索引中)。在 B+ 树中,所有叶子节点处于同一层级,这使得查找、插入和删除操作的时间复杂度为 O(log N)。
  • 哈希表:用于 HASH 索引(如 MEMORY 存储引擎),哈希表通过计算哈希值来直接访问数据,但不支持范围查询。

索引类型

  • 主键索引(Primary Key Index):唯一标识表中的每一行,自动创建在主键列上。
  • 唯一索引(Unique Index):确保索引列中的所有值都是唯一的。
  • 普通索引(Regular Index):最常用的索引类型,没有唯一性限制。
  • 全文索引(Full-Text Index):用于全文搜索,如搜索包含特定单词的文本。
  • 组合索引(Composite Index):索引多个列,可以加速对这些列的组合查询。

索引优化

  1. 唯一性索引的值是唯一的,可以更快速的通过该索引来确定某条记录。
  2. 为经常需要排序、分组和联合操作的字段建立索引。
  3. 为常作为查询条件的字段建立索引。
  4. 限制索引的数目:越多的索引,会使更新表变得很浪费时间。
  5. 尽量使用数据量少的索引。如果索引的值很长,那么查询的速度会受到影响。
  6. 尽量使用前缀来索引,如果索引字段的值很长,最好使用值的前缀来索引。
  7. 删除不再使用或者很少使用的索引
  8. 最左前缀匹配原则,非常重要的原则。
  9. 尽量选择区分度高的列作为索引
  10. 索引列不能参与计算,保持列“干净”:带函数的查询不参与索引。
  11. 尽量的扩展索引,不要新建索引。

慢SQL优化

抓取慢SQL

启用慢查询日志

慢查询日志可以记录所有执行时间超过指定阈值的查询。
编辑 MySQL 配置文件(通常是 my.cnf 或 my.ini):

slow_query_log = 1
slow_query_log_file = /path/to/your/slow-query.log
long_query_time = 2

slow_query_log: 启用慢查询日志(1 表示启用,0 表示禁用)。
slow_query_log_file: 指定日志文件的路径。
long_query_time: 设置慢查询的时间阈值(单位为秒),例如 2 表示记录执行时间超过 2 秒的查询。

查看慢查询日志

可以直接查看配置的日志文件,或者使用工具来分析日志,例如 mysqldumpslow 或 pt-query-digest(来自 Percona Toolkit)。
使用 mysqldumpslow:

mysqldumpslow -s t -t 10 /path/to/your/slow-query.log

-s t:按时间排序。
-t 10:显示前 10 条最慢的查询

实时监控

可以使用 MySQL 的内置工具或第三方监控工具进行实时查询分析:

  • MySQL Workbench:提供了图形化的慢查询分析功能。
  • Grafana + Prometheus:可以结合 MySQL Exporter 监控数据库性能,包括慢查询。

EXPLAIN 命令

使用 EXPLAIN 命令来分析 SQL 的 执行计划 。执行计划是指一条 SQL 语句在经过 MySQL 查询优化器的优化会后,具体的执行方式。

EXPLAIN 并不会真的去执行相关的语句,而是通过 查询优化器 对语句进行分析,找出最优的查询方案,并显示对应的信息。

EXPLAIN 适用于 SELECT, DELETE, INSERT, REPLACE, 和 UPDATE语句,我们一般分析 SELECT 查询较多。

在这里插入图片描述

  1. id:
    描述: 查询的唯一标识符。对于多表查询,id 用于区分不同的 SELECT 语句。
    分析: 数字越大,执行优先级越高。相同的 id 表示这些操作可以并行执行。
  2. select_type:
    描述: 查询类型,如简单查询、联合查询、子查询等。
    常见值:
  • SIMPLE: 简单查询,不包含子查询或联合查询。
  • PRIMARY: 主查询(包含子查询的最外层查询)。
  • SUBQUERY: 子查询。
  • DERIVED: 派生表(子查询的结果作为临时表)。
  1. table:
    描述: 执行查询时访问的表名。
    分析: 确保查询访问的表是期望的,检查是否有意外的表被访问。
  2. type:
    描述: 访问类型,表示查询 MySQL 表的方式。
    常见值:
  • ALL: 全表扫描(性能最差)。
  • index: 索引扫描(读取索引而不是实际表数据)。
  • range: 范围扫描(使用索引的范围查找)。
  • ref: 通过索引查找单个记录。
  • eq_ref: 对每个索引值只返回一行记录。
  • const: 常量(单行查找,性能最好)。
  1. possible_keys:
    描述: 查询可能使用的索引列表。
    分析: 确保查询能够利用到索引。如果没有显示预期的索引,可能需要检查索引的设计或优化查询条件。
  2. key:
    描述: 实际使用的索引。
    分析: 确认查询是否使用了期望的索引。未使用索引可能表示索引不适用或者索引未被使用。
  3. key_len:
    描述: 使用的索引的长度。
    分析: 该值帮助确定索引的使用效率。较短的长度通常表示使用了索引的部分字段。
  4. ref:
    描述: 显示哪个列或常量与索引一起被使用。
    分析: 确保使用的是索引的前缀列。比如 const 表示对每个索引值只返回一行记录,ref 表示用某个字段值来查找记录。
  5. rows:
    描述: MySQL 估计的要扫描的行数。
    分析: 这是 MySQL 预估的数量,通常用于比较不同执行计划的成本。较大的值可能表示查询效率低。
  6. Extra:
    描述: 额外的执行信息。
    常见值:
  • Using where: 使用 WHERE 子句过滤记录。
  • Using index: 使用覆盖索引(只从索引中获取数据)。
  • Using filesort: 使用文件排序(可能导致额外的性能开销)。

参考:

MySQL索引优化(超详细)
MYSQL执行计划分析性

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/diannao/52672.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

C程序设计——类型转换

什么是类型转换 当两个不同类型的数据,进行算数运算时,就需要将两个数据转换成同一类型,再运算,这就叫类型转换。 注意,类型转换只是发生在计算过程中,并不更改变量或常量本身的类型。 隐式类型转换 经…

2024年第十五届蓝桥杯图形化省赛真题分享包含答案

Scratch初级:8月24日9:30-11:00 Scratch中级:8月24日14:00-15:30 Python:8月25日9:30-11:00 C++:8月25日14:00-15:30 这次考了哪些内容呢,我们来大概看看(编程题没有答案,编程题有,大家可以评论群留言单选题的答案): <

MATLAB 计算凹凸多边形的面积(85)

MATLAB 计算凹凸多边形的面积(84) 一、算法介绍二、算法实现1.代码一、算法介绍 计算凹凸多边形的面积,并输出计算结果,可视化 二、算法实现 1.代码 % 设置多边形的顶点坐标 % 这里以一个五边形为例 x = [1, 3, 4

Codeforces 1304C - Air Conditioner(1500)

Air Conditioner 题面翻译 一个餐馆中有个空调&#xff0c;每分钟可以选择上调 1 1 1 个单位的温度或下调 1 1 1 个单位的温度&#xff0c;当然你也可以选择不变&#xff0c;初始的温度为 m m m 。 有 n n n 个食客&#xff0c;每个食客会在 t i t_i ti​ 时间点到达&am…

千亿养生茶饮市场待觉醒,如何善用“批量混剪”带火中药茶?

入夏以来&#xff0c;中医养生正强势打开年轻人的市场。 上线24h卖出115万帖&#xff0c;服务器被挤爆&#xff0c;浙江省中医院“乌梅汤2.0”打开了中药代茶饮爆单的序幕。 进入三伏天后&#xff0c;除了爆火的晒背外&#xff0c;中医药地摊纷纷扎在各地夜市里&#xff0c;把脉…

软件设计师全套备考系列文章15 -- 数据库:规范化、控制功能、大数据

软考-- 软件设计师&#xff08;15&#xff09;-- 数据库&#xff1a;规范化、控制功能、大数据 文章目录 软考-- 软件设计师&#xff08;15&#xff09;-- 数据库&#xff1a;规范化、控制功能、大数据前言一、章节考点二、规范化三、数据库的控制功能四、大数据、数据仓库 前言…

Linux之7z命令压缩和解压(三十四)

简介&#xff1a; CSDN博客专家&#xff0c;专注Android/Linux系统&#xff0c;分享多mic语音方案、音视频、编解码等技术&#xff0c;与大家一起成长&#xff01; 新书发布&#xff1a;《Android系统多媒体进阶实战》&#x1f680; 优质专栏&#xff1a; Audio工程师进阶系列…

【Java设计模式】非循环访问者模式:简化对象交互

文章目录 【Java设计模式】非循环访问者模式&#xff1a;简化对象交互一、概述二、非循环访问者设计模式的意图三、非循环访问者模式的详细解释及实际示例四、Java中非循环访问者模式的编程示例五、非循环访问者模式类图六、Java中何时使用非循环访问者模式八、非循环访问者模式…

pdf怎么转换成excel?掌握好这9个pdf转换方法就够了(全)

pdf怎么转换成excel&#xff1f;日常的办公生活中&#xff0c;我们经常需要接触很多文档格式&#xff0c;而pdf格式文件因为其稳定性和安全性受到很多办公人士的喜爱。但PDF文件不能直接编辑&#xff0c;很多小伙伴们就会出现关于pdf格式转换的难题&#xff0c;比如说想把一份带…

边听边打?不再是难题,4款音频转文字神器推荐

无论是会议记录、课堂笔记还是采访录音&#xff0c;能快速准确地转录成文本&#xff0c;那可是大大提高了工作效率。市面上有几款工具在这方面做得不错&#xff0c;比如365在线转文字、布谷鸟配音、腾讯云语音识别和Speechnotes。今天就来个大比拼&#xff0c;看看它们各自的表…

Spring八股文

重点 描述一下bean的生命周期 简述版 调用构造器 或者是通过工厂的方式创建Bean对象给bean对象的属性注入值调用初始化方法&#xff0c;进行初始化&#xff0c; 初始化方法是通过init-method来指定的.使用IOC容器关闭时&#xff0c; 销毁Bean对象 详细&#xff1a; 1. 实例化 …

MySQL基础一

一.前言 随着文件中存储的内容越来越多&#xff0c;在文件中修改和查找某些数据已经变得非常困难了&#xff0c;所以人们发明了一种专门的软件来管理存储的数据&#xff0c;这些数据依照一定格式保存&#xff0c;通过这个软件可以方便的对数据进行增删改查操作&#xff0c;从而…

华为AC旁挂二层组网配置详解:从DHCP部署到无线业务配置,完成网络搭建

组网需求 AC组网方式&#xff1a;旁挂二层组网。 DHCP部署方式&#xff1a; AC作为DHCP服务器为AP分配IP地址。 防火墙作为DHCP服务器为STA分配IP地址。 业务数据转发方式&#xff1a;直接转发。 网络拓扑图 对于旁边路直接转发&#xff0c;优点就是数据流量不经过AC&…

TypeSript9 命名空间namesapce

我们在工作中无法避免全局变量造成的污染&#xff0c;TypeScript提供了namespace 避免这个问题出现 内部模块&#xff0c;主要用于组织代码&#xff0c;避免命名冲突。命名空间内的类默认私有通过 export 暴露通过 namespace 关键字定义 TypeScript与ECMAScript 2015一样&…

【数字时序】时钟树延迟偏差——CPPR adjustment

接上一篇文章Innovus的时序报告解读&#xff0c;新版的貌似多了一些信息&#xff0c;比如CPPR Adjustment和Derate。不太清楚这两个是什么概念&#xff0c;搜索之后转载2篇后端工程师的博客如下&#xff1a; 搜到个这个网站好像有很多后端相关的知识点分享一哈&#xff1a; Co…

CSS基础 什么是盒模型

是什么 当对一个文档进行布局&#xff08;layout&#xff09;的时候&#xff0c;浏览器的渲染引擎会根据标准之一的 CSS 基础框盒模型&#xff08;CSS basic box model&#xff09;&#xff0c;将所有元素表示为一个个矩形的盒&#xff08;box&#xff09; 一个盒子由四个部分…

CSS之Float浮动(二)

一、传统网页布局 网页布局的本质&#xff1a;用 CSS 来摆放盒子&#xff0c;把盒子摆放到相应位置。CSS 提供了三种传统布局方式&#xff08;这里指的只是传统布局&#xff0c;其实还有一些特殊高级的布局方式&#xff09;&#xff1a; 标准流浮动定位 1、所谓的标准流&#…

MySQL EXPLAIN 完全解读

MySQL EXPLAIN 完全解读 一、一个EXPLAIN简单执行二、简单了解2.1. id&#xff1a;查询的标识符。2.2. select_type&#xff1a;查询的类型。2.3. table&#xff1a;输出结果集的表。2.4. type&#xff1a;连接类型&#xff0c;这是MySQL决定如何查找表中行的方法。2.5. possib…

大语言模型-GPT3-Language Models are Few-Shot Learners

一、背景信息&#xff1a; GPT3是于2020 年由OpenAI 发布的预训练语言模型。 GPT3在自然语言处理&#xff08;NLP&#xff09;任务中表现出色&#xff0c;可以生成连贯的文本、回答问题、进行对话等。 GPT3的网络架构继续沿用GPT1、GPT2的是多层Transformer Decoder改的结构。…

大数据技术之Flume 企业开发案例——自定义 Sink(10)

目录 自定义 Sink 1&#xff09;介绍 2&#xff09;需求 3&#xff09;编码 4&#xff09;测试 自定义 Sink 1&#xff09;介绍 Sink 不断地轮询 Channel 中的事件并批量地移除它们&#xff0c;随后将这些事件批量写入到存储或索引系统&#xff0c;或者发送到另一个 Flu…