mysql orderby多个_MySQL OrderBy

MySQL会为每个线程分配一个内存(sort_buffer)用于排序,该内存小大为 sort_buffer_size

如果排序的数量小于 sort_buffer_size,排序将会在内存中完成。

如果排序数据量很大,内存中无法存下这么多数据,则会使用磁盘临时文件来辅助排序,也称外部排序

在使用外部排序时,MySQL 会分成好几份单独的临时文件用来存放排序后的数据,然后再将这些文件合并成一个大文件

MySQL 会通过遍历索引将满足条件的数据读到 sort_buffer,并且按照排序字段进行快速排序

如果查询的字段不包含在辅助索引中,需要按照辅助索引记录的主键返回聚集索引所需字段。

该方式会造成随机 IO,在MySQL 5.6提供了 MRR 机制,会将副主索引匹配记录的主键取出来再内存中进行排序,然后再回表

按照情况建立联合索引来避免排序锁带来的性能损耗,允许的情况下也可以建立覆盖索引来避免回表。

全字段排序

通过索引将所需的字段全部读取到 sort_buffer 中

按照排序字段进行排序

将结果返回给客户端

缺点:

造成sort_buffer 中存放不下很多数据,因为除了排序字段还存放其他字段,对 sort_buffer 的利用效率不高

当所需排序数据量很大时,会有很多的临时文件,排序性能也会很差

优点: MySQL 认为内存足够大时会优先选择全字段排序,因为这种方式比 row_id排序避免了一次回表操作

rowid 排序

通过控制排序的行数据的长度来让 sort_buffer 中尽可能多地存放数据,max_length_for_sort_data

只将需要排序的字段和主键读到 sort_buffer 中,并按照排序字段进行排序

按照排序后的顺序,取id 进行回表取出想要获取的数据

将结果集返回给客户端

优点:更好地利用内存的 sort_buffer 进行排序操作,尽量减少对磁盘的访问

缺点:回表的操作时随机 IO,会造成大量的随机读,不一定就比全字段排序减少对磁盘的访问

按照排序的结果返回客户端所取行数

随机取出三行数据的需求

order by rand() 这个语句需要 Using temporary 和 Using filesort,查询的执行代价比较大

使用表的主键 id 的最大值和最小值来做随机算法。

这种方法如果在 id 有空洞的情况下,就不是真正的随机。代价比 1 小很多,因为只使用了 id 字段,没有像1 一样,需要在 order by rand() 方法组成的临时表排序,再获取 rowid 再回表。如果数据库使用了软删除,就可以避免空洞的情况,减少扫描行数。

取出整个表的行数C,随机获取三个随机值y1,y2,y3,limit y,1 得到三个数据。扫描行数 是 总行数c+(y1+1)+(y2+1)+(y3+1)

可以进一步优化:limit Ymin, (Ymax-Ymin), 取出id 后计算出 Y1,Y2,Y3对应的 id ,然后 select in ids,扫描行数减少为 C + ymax +3.

在实际的应用中,应该避免让 mysql 来排序,尽量将业务逻辑写在业务代码中,让数据库只做 “读写数据” 的事情。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/359841.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

java 双重检查锁_Java中可怕的双重检查锁定习惯用法

java 双重检查锁本文讨论的问题不是新问题,但即使是经验丰富的开发人员也仍然很棘手。 单例模式是常见的编程习惯用法。 但是,当与多个线程一起使用时,必须进行某种类型的同步,以免破坏代码。 在相关文章中,我们的JCG合…

mysql-bin.index找不到_MySQL不能启动 mysql-bin.index' not found (Errcode: 13)

配置复制,添加如下内容到/etc/my.cnf:log-bin/var/lib/mysql/binlogs/mysql-binmax_binlog_size100Mexpire_logs_days5sync_binlog1binlog_cache_size1Mbinlog-formatROW结果重启的时候,报错:-[root www.linuxidc.com mysql]# /et…

[ZZ] 使用rsync来实现快速删除大量文件

昨天遇到了要在Linux下删除海量文件的情况,需要删除数十万个文件。这个是之前的程序写的日志,增长很快,而且没什么用。这个时候,我们常用的删除命令rm -fr * 就不好用了,因为要等待的时间太长。所以必须要采取一些非常…

java 文件缓冲区_Java开发笔记(八十六)通过缓冲区读写文件

前面介绍了利用文件写入器和文件读取器来读写文件,因为FileWriter与FileReader读写的数据以字符为单位,所以这种读写文件的方式被称作“字符流I/O”,其中字母I代表输入Input,字母O代表输出Output。可是FileWriter的读操作并不高效…

Scramble String -- LeetCode

原题链接: http://oj.leetcode.com/problems/scramble-string/这道题看起来是比較复杂的,假设用brute force,每次做分割,然后递归求解,是一个非多项式的复杂度,一般来说这不是面试官想要的答案。这事实上是一道三维动态…

xuggler实现视频压缩_Xuggler视频处理简介

xuggler实现视频压缩注意:这是我们的“ Xuggler开发教程 ”系列的一部分。 随着Internet中视频的爆炸性增长,开发人员经常需要在其应用程序中操纵视频内容。 Xuggler是Java开发人员的免费开放源代码库,可用于实时解压缩,处理和压缩…

oledb excel java_C#中Excel 2016的oledb连接字符串

通过Office 365程序从本地安装的Office 13升级到Office 16后,我发生了这种情况 . 我得到了这个例外:Microsoft.ACE.OLEDB.12.0提供程序未在本地计算机上注册 .我无法通过Office 365安装过程找到安装驱动程序的方法 .我在App.config中的连接字符串使用它的…

位,字,字节之间关系及关联知识普及

1》 位、字、字节关系8位(bit)1字节(Byte),1024字节1KB;提到了字节,不得不再提到“字”这个计量单位:“字”由若干个字节构成,字的位数叫做字长,字长就是说字所对应的二进制数的长度…

Android 绘制动态图

最近准备技能大赛,需要将从传感器中读出的数据在移动客户端以图的形式绘制出来,因为平时很少绘图,于是各种查资料,算是勉强做出来了。 以下是大赛理论效果图(左)和实际效果图(右)&am…

海外 谷歌 app api_Google App Engine Java功能和命名空间API

海外 谷歌 app api功能API 使用Capabilities API,您的应用程序可以检测特定API功能的停机和计划停机时间。 您可以使用此API来检测应用程序何时不可用,然后绕过它来减少应用程序的停机时间。 我们该如何处理呢? 1.优雅:创建一个…

$(document).ready() 和 window.onload 方法比较

说明 页面加载文档完毕后,浏览器会通过 Javascript 为 DOM 元素添加事件。 Javascript 使用 window.onload 方法,而 jQuery 使用 $(document).ready() 方法。 $(document).ready() 方法可以极大的提高 Web 应用程序的相应速度,因为该方法可以…

python在excel中查找内容_用python实现excel中查找指定字符的行信息

标签:print python实现 run div col with open value row 信息用python实现excel中查找指定字符的行信息strr # 字符串 or 字符filename # 文件名路径with open(filename,‘r‘) as fp:for line in fp:if strr in line:print (line.rows)将会输出ex…

使用活动记录执行CRUD

本文是我们学院课程的一部分,标题为jOOQ –类型安全的数据库查询 。 在SQL和特定关系数据库很重要的Java应用程序中,jOOQ是一个不错的选择。 当JPA / Hibernate抽象过多,JDBC过多时,这是一种替代方法。 它显示了一种现代的领域特…

java undo_用JAVA实现Undo、Redo,Copy、Paste、Cut_java

programlover原作package clipborad;import javax.swing.JTextArea;import java.awt.datatransfer.*;import java.awt.*;import javax.swing.*;import java.io.*;import javax.swing.undo.*;http://www.gaodaima.com/64851.html用JAVA实现Undo、Redo,Copy、Paste、Cut_javaimpo…

项目管理控件Project Management Library

Project Management Library是一款项目管理控件,包含了项目管理相关的Windows客户端控件,如:ProjectView, ResourcesView, ScheduleView, StatisticsView。支持所有.NET语言,可以用于Windows桌面应用程序,具有标准的界面和操作自定义设置、拖…

maven aspectj_使用Spring AspectJ和Maven进行面向方面的编程

maven aspectjSpring框架附带AOP支持。 实际上,如Spring参考文档中所述 , “ Spring的关键组件之一是AOP框架。 尽管Spring IoC容器不依赖于AOP,这意味着您不需要使用AOP,但AOP是对Spring IoC的补充,以提供一种功能强…

ios 查询mysql数据库操作系统_iOS数据库FMDB--增删改查(模糊查询)详细介绍

简介:很早就想整理一下数据库的使用了,刚好最近接触较多,加之可以安排出空余的时间,所以瓜子我贡献出自己喝咖啡的时间整理一下FMDB的使用,以下是对FMDB的介绍以及基本使用 --- insert、delete、update、select。其中s…

java arraylist 重复_Java中ArrayList去除重复元素

Java中ArrayList去除重复元素//删除ArrayList中重复元素public static void removeDuplicate(ArrayList list) {for ( int i 0 ; i for ( int j list.size() - 1 ; j > i; j -- ) {ForCytoLevel3 jjj (ForCytoLevel3)list.get(j);ForCytoLevel3 i…

c#时间转换

转自 http://blog.csdn.net/yysyangyangyangshan/article/details/6782874最近做ASP.NET的一个项目,获取时间的时候,由于我的系统时间设置了上午和下午,结果DateTime.Now老是写不到数据库中,然后,上网查了个[csharp]vi…

SQL Server 2008 R2如何生成带数据的数据库脚本

1.对想要复制的数据库右键,“任务”,“生成脚本” 2.下面需要注意的是,默认情况下,只会生成仅架构的脚本,也就是说仅仅有表结构,而没有数据的空壳。所以需要额外的设置。 在设置脚本编写选项,选…