索引和深分页优化案例

一、初始状态没加索引

总数据100w左右
浅分页 查询10条需要1.5s左右

select *  from timer_task where app = 'hzhXtimer' order by run_timer 
limit 0,10

在这里插入图片描述

深分页查询10条需要1.7s左右

select *  from timer_task where app = 'hzhXtimer' order by run_timer 
limit 100000,10

在这里插入图片描述
看执行计划,是去扫描了全表,且有Using filesort 给 run_timer 字段做了额外排序,所以得考虑建索引
在这里插入图片描述

二、建立索引:

1)只建单索引字段 app,那么系统还需要给run_timer做额外排序,还是较慢的

create index timer_task_index on timer_task (app)

浅分页219ms
在这里插入图片描述

深分页 302ms
在这里插入图片描述
在这里插入图片描述

2)所以需要建立联合索引(app,run_timer)
为什么建立联合索引后,就不需要对run_timer进行额外排序?
因为在B+树中,当第一个字段app的值确定之后(对应where app = 某值),第2个字段run_timer的值就会进行排序之后再存储,因为这个存储规则,所以才避免了额外排序

create index timer_task_index on timer_task (app,run_timer)

在建了app,run_timer 联合索引后,浅分页3ms,这个已经没问题

select *  from timer_task where app = 'hzhXtimer' order by run_timer 
limit 0,10

在这里插入图片描述

而深分页 151ms,还需要优化

select *  from timer_task where app = 'hzhXtimer' order by run_timer 
limit 100000,10

在这里插入图片描述

三、在已建立合适索引下,优化深分页sql写法

1)先理解查询过程
1、在联合索引树中查找100010条满足where条件 app=某值 的数据
2、通过id回表查询其他字段信息,回表 100010次
3、扔掉100000条数据,取最后10条返回
定位深分页慢的原因:无效的回表次数太多
在这里插入图片描述

2)解决方案:通过改sql写法减少回表次数
通过子查询先把10条数据的主键id task_id 获取到,然后在外循环再去回表取10条数据,最终只回表10次,只需30ms

--写法一:子查询 + join写法
select * from timer_task join (select task_id  from timer_task where app = 'hzhXtimer' order by run_timer limit 100000,10
) temp where timer_task.task_id = temp.task_id--写法二:子查询 + where task_id in 写法
select * from timer_task where task_id in(select task_id from (select task_id  from timer_task where app = 'hzhXtimer' order by run_timer limit 100000,10)as temp
)

深分页 运行截图:
子查询 + join写法
在这里插入图片描述

子查询 + where task_id in 写法
在这里插入图片描述

执行计划截图:
在这里插入图片描述

浅分页还是2-3ms,没什么影响
在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/bicheng/31050.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

视频采集概念

视频采集通常指的是将视频信号从视频源(如摄像头、视频播放器等)捕获并转换为数字格式,以便于计算机处理和存储。 步骤: 视频信号捕获:通过摄像头、网络摄像头、视频采集卡等设备将视频信号捕获。 信号转换&#xff…

【diffusers极速入门(三)】生成的图像尺寸与 UNet 和 VAE 之间的关系

先上结论,一句话总结即: SD 图片的输入\输出尺寸(高或宽) Unet 输入\输出的样本尺寸(高或宽) x VAE 的缩放尺寸 在使用生成模型时,特别是图像生成任务中,理解 UNet 和 VAE&#xf…

【CPP】选择排序:冒泡排序、快速排序

目录 1.冒泡排序简介代码分析 2.快速排序2.1霍尔版本简介代码分析 2.2挖坑版本2.3前后指针版本2.4非递归的快排思路代码 什么是交换排序? 基本思想:所谓 交换,就是根据序列中两个记录键值的比较结果来对换这两个记录在序列中的位置&#xff0…

[BUUCTF从零单排] Web方向 01.Web入门篇之粗心的小李解题思路

这是作者新开的一个专栏《BUUCTF从零单排》,旨在从零学习CTF知识,方便更多初学者了解各种类型的安全题目,后续分享一定程度会对不同类型的题目进行总结,并结合CTF书籍和真实案例实践,希望对您有所帮助。当然&#xff0…

对比分析:GBDT、XGBoost、CatBoost和LightGBM

对比分析:GBDT、XGBoost、CatBoost和LightGBM 梯度提升决策树(GBDT)是当前机器学习中常用的集成学习方法之一,它通过集成多个弱学习器(通常是决策树)来构建强学习器。GBDT在分类和回归任务中表现优异&…

微软Azure AI更新视频翻译和语音翻译 API 功能!企业适用TTS文本转语音

很高兴与大家分享 Azure AI 语音翻译产品套件的两个重大更新! 分别是视频翻译和增强的实时语音翻译 API。 视频翻译(批量) 微软宣布推出视频翻译预览版,这是一项突破性的服务,旨在改变企业本地化视频内容的方式。 随着…

微博舆情分析系统可以继续完善的基于python 前端vue

微博舆情分析系统可以继续完善的,前后端分离,前端基于vue 后端基于python的flask可以说是非常的简洁,支持实时更新数据。界面如图 主要工作点体现在后端实时更新数据跟数据的处理方面上,后续有空会用hadoop来处理海量数据真…

刷题——找到对应数组目标值的下标

二分查找-I_牛客题霸_牛客网 方法一&#xff1a;遍历找目标值 int search(vector<int>& nums, int target) {// write code herefor(int i 0; i < nums.size(); i) {if(target nums[i]) {return i; // 返回目标值在数组中的索引}}return -1; // 如果找不到目…

C++语法07 程序中的除法和求余

程序中的除法 int / int int double / int double int / double double double / double double 规律总结 只要除号任意一边出现了double类型&#xff0c;结果就是double类型 只有除号两边都是int类型&#xff0c;结果才是int类型 这个规律也适用于加法减法和乘法 …

用国内首家文生软件平台生成一个整蛊拼图小游戏是什么体验?

前言&#xff1a; 众所周知&#xff0c;2023年是中国大模型发展的元年&#xff0c;以ChatGPT3.5为代表的初代语言大模型横空出世&#xff0c;直接掀起了一阵全球范围内的AIGC浪潮。 在中国大模型追星赶月的这一年&#xff0c;技术迭代日新月异&#xff0c;行业趋势不断变化&a…

IIS配置網站登錄驗證,禁止匿名登陸

需要維護一個以前的舊系統&#xff0c;這個系統在內網運行&#xff0c;需要抓取電腦的登陸賬號&#xff0c;作為權限管理的一部分因此需要在IIS配置一下

基于可视化设计的低代码开发分析与应用探讨

随着数字化时代的到来&#xff0c;越来越多的企业开始关注低代码开发。低代码开发作为一种快速应用开发模式&#xff0c;能够显著提高企业生产力。本文以可视化设计为核心&#xff0c;对低代码开发的原理、技术架构、应用场景及挑战进行分析&#xff0c;旨在为我国低代码产业的…

线性代数|机器学习-P16矩阵A的导数

文章目录 1. 概述2. 求 d A − 1 ( t ) d t \frac{\mathrm{d}A^{-1}(t)}{\mathrm{d}t} dtdA−1(t)​3. 求 d λ ( t ) d t \frac{\mathrm{d}\lambda(t)}{\mathrm{d}t} dtdλ(t)​3.1 A 和 A T A^T AT有相同的特征值3.2 特征向量单位化3.3 求 λ ( t ) \lambda(t) λ(t) 1. 概述…

芯片验证7个月经验总结

1.芯片验证的工作相对软件开发的工作来说&#xff0c;容错率是要低不少的&#xff0c;主要体现在debug的时间上&#xff0c;软件编译几分钟就可以了&#xff0c;芯片仿真短则几十分钟&#xff0c;长的要几小时甚至几天&#xff0c;如果靠编译去发现问题 效率会非常低&#xff0…

Nature正刊!亚利桑那大学博士生陈舒立一作兼通讯最新成果!揭示亚马逊雨林干旱响应的生物地理学机制

2024年6月19日&#xff0c;国际知名学术期刊《Nature》发表了一项美国亚利桑那大学Scott Saleska教授团队的最新成果“Amazon forest biogeography predicts resilience and vulnerability to drought”。通过将森林样地调查数据与遥感观测相结合系统揭示了亚马逊雨林干旱响应的…

网络编程(六)TCP并发服务器

文章目录 &#xff08;一&#xff09;概念&#xff08;二&#xff09;TCP并发服务器&#xff08;三&#xff09;使用多线程实现TCP并发服务器1. 思路2. 注意点3. 代码实现 &#xff08;四&#xff09;使用多进程实现TCP并发服务器1. 思路2. 注意点3. 代码实现4. 关于子进程结束…

2)如何去构建记忆宫殿辅助记忆

构建记忆宫殿 记忆方式构建记忆宫殿后记 记忆方式 记忆方法多种多样&#xff0c;旨在帮助人们更有效地编码、储存和回忆信息。以下是一些常用和有效的记忆方法&#xff1a; 1.联想记忆法&#xff1a;通过将新信息与已知信息或图像进行创意性联想来加深记忆。例如&#xff0c;将…

机器学习——RNN、LSTM

RNN 特点&#xff1a;输入层是层层相关联的&#xff0c;输入包括上一个隐藏层的输出h1和外界输入x2&#xff0c;然后融合一个张量&#xff0c;通过全连接得到h2&#xff0c;重复 优点&#xff1a;结构简单&#xff0c;参数总量少&#xff0c;在短序列任务上性能好 缺点&#x…

姿态识别论文复现(一)安装包+下载数据

Lite-HRNet&#xff1a;轻量级高分辨率网络 简介&#xff1a;高分辨率网络Lite-HRNet&#xff0c;用于人体姿态估计 环境配置&#xff1a;该代码是在 Ubuntu 16.04 上使用 python 3.6 开发的。需要 NVIDIA GPU。使用 8 个 NVIDIA V100 GPU 卡进行开发和测试。其他平台或 GPU …

CheckPoint 防火墙 CVE-2024-24919 VPN 漏洞修复说明

1. 漏洞说明 在 2024 年 5 月 27 日进行安全更新后&#xff0c;Check Point 的专门工作组将继续调查未经授权访问我们客户使用的 VPN 产品的企图。 2024 年 5 月 28 日&#xff0c;我们在远程访问 VPN 社区和移动访问软件刀片中使用 IPsec VPN 的安全网关中发现了一个漏洞 (…