首页 / MYSQL / 简述MySQL排序原理的实例详解

简述MySQL排序原理的实例详解

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了简述MySQL排序原理的实例详解，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含8617字，纯文字阅读大概需要13分钟。

内容图文

这篇文章主要介绍了浅谈MySQL排序原理与案例分析的相关资料,需要的朋友可以参考下

前言

排序是数据库中的一个基本功能，MySQL也不例外。用户通过Order by语句即能达到将指定的结果集排序的目的，其实不仅仅是Order by语句，Group by语句，Distinct语句都会隐含使用排序。本文首先会简单介绍SQL如何利用索引避免排序代价，然后会介绍MySQL实现排序的内部原理，并介绍与排序相关的参数，最后会给出几个“奇怪”排序例子，来谈谈排序一致性问题，并说明产生现象的本质原因。

1.排序优化与索引使用

为了优化SQL语句的排序性能，最好的情况是避免排序，合理利用索引是一个不错的方法。因为索引本身也是有序的，如果在需要排序的字段上面建立了合适的索引，那么就可以跳过排序的过程，提高SQL的查询速度。下面我通过一些典型的SQL来说明哪些SQL可以利用索引减少排序，哪些SQL不能。假设t1表存在索引key1(key_part1,key_part2),key2(key2)

a.可以利用索引避免排序的SQL

SELECT * FROM t1 ORDER BY key_part1,key_part2;
SELECT * FROM t1 WHERE key_part1 = constant ORDER BY key_part2;
SELECT * FROM t1 WHERE key_part1 > constant ORDER BY key_part1 ASC;
SELECT * FROM t1 WHERE key_part1 = constant1 AND key_part2 > constant2 ORDER BY key_part2;

b.不能利用索引避免排序的SQL

//排序字段在多个索引中，无法使用索引排序
SELECT * FROM t1 ORDER BY key_part1,key_part2, key2;
 
//排序键顺序与索引中列顺序不一致，无法使用索引排序
SELECT * FROM t1 ORDER BY key_part2, key_part1;
 
//升降序不一致，无法使用索引排序
SELECT * FROM t1 ORDER BY key_part1 DESC, key_part2 ASC;
 
//key_part1是范围查询，key_part2无法使用索引排序
SELECT * FROM t1 WHERE key_part1> constant ORDER BY key_part2;

2.排序实现的算法

对于不能利用索引避免排序的SQL，数据库不得不自己实现排序功能以满足用户需求，此时SQL的执行计划中会出现“Using filesort”，这里需要注意的是filesort并不意味着就是文件排序，其实也有可能是内存排序，这个主要由sort_buffer_size参数与结果集大小确定。MySQL内部实现排序主要有3种方式，常规排序，优化排序和优先队列排序，主要涉及3种排序算法：快速排序、归并排序和堆排序。假设表结构和SQL语句如下：

CREATE TABLE t1(id int, col1 varchar(64), col2 varchar(64), col3 varchar(64), PRIMARY KEY(id),key(col1,col2));
SELECT col1,col2,col3 FROM t1 WHERE col1>100 ORDER BY col2;

a.常规排序
(1).从表t1中获取满足WHERE条件的记录
(2).对于每条记录，将记录的主键+排序键(id,col2)取出放入sort buffer
(3).如果sort buffer可以存放所有满足条件的(id,col2)对，则进行排序；否则sort buffer满后，进行排序并固化到临时文件中。(排序算法采用的是快速排序算法)
(4).若排序中产生了临时文件，需要利用归并排序算法，保证临时文件中记录是有序的
(5).循环执行上述过程，直到所有满足条件的记录全部参与排序
(6).扫描排好序的(id,col2)对，并利用id去捞取SELECT需要返回的列(col1,col2,col3)
(7).将获取的结果集返回给用户。
从上述流程来看，是否使用文件排序主要看sort buffer是否能容下需要排序的(id,col2)对，这个buffer的大小由sort_buffer_size参数控制。此外一次排序需要两次IO，一次是捞(id,col2),第二次是捞(col1,col2,col3)，由于返回的结果集是按col2排序，因此id是乱序的，通过乱序的id去捞(col1,col2,col3)时会产生大量的随机IO。对于第二次MySQL本身一个优化，即在捞之前首先将id排序，并放入缓冲区，这个缓存区大小由参数read_rnd_buffer_size控制，然后有序去捞记录，将随机IO转为顺序IO。
b.优化排序
常规排序方式除了排序本身，还需要额外两次IO。优化的排序方式相对于常规排序，减少了第二次IO。主要区别在于，放入sort buffer不是(id,col2),而是(col1,col2,col3)。由于sort buffer中包含了查询需要的所有字段，因此排序完成后可以直接返回，无需二次捞数据。这种方式的代价在于，同样大小的sort buffer，能存放的(col1,col2,col3)数目要小于(id,col2)，如果sort buffer不够大，可能导致需要写临时文件，造成额外的IO。当然MySQL提供了参数max_length_for_sort_data，只有当排序元组小于max_length_for_sort_data时，才能利用优化排序方式，否则只能用常规排序方式。
c.优先队列排序
为了得到最终的排序结果，无论怎样，我们都需要将所有满足条件的记录进行排序才能返回。那么相对于优化排序方式，是否还有优化空间呢？5.6版本针对Order by limit M，N语句，在空间层面做了优化，加入了一种新的排序方式--优先队列，这种方式采用堆排序实现。堆排序算法特征正好可以解limit M，N 这类排序的问题，虽然仍然需要所有元素参与排序，但是只需要M+N个元组的sort buffer空间即可，对于M，N很小的场景，基本不会因为sort buffer不够而导致需要临时文件进行归并排序的问题。对于升序，采用大顶堆，最终堆中的元素组成了最小的N个元素，对于降序，采用小顶堆，最终堆中的元素组成了最大的N的元素。

3.排序不一致问题

案例1

Mysql从5.5迁移到5.6以后，发现分页出现了重复值。
测试表与数据：

create table t1(id int primary key, c1 int, c2 varchar(128));
insert into t1 values(1,1,'a');
insert into t1 values(2,2,'b');
insert into t1 values(3,2,'c');
insert into t1 values(4,2,'d');
insert into t1 values(5,3,'e');
insert into t1 values(6,4,'f');
insert into t1 values(7,5,'g');

假设每页3条记录，第一页limit 0,3和第二页limit 3,3查询结果如下：

简述MySQL排序原理的实例详解 - 文章图片

我们可以看到 id为4的这条记录居然同时出现在两次查询中，这明显是不符合预期的，而且在5.5版本中没有这个问题。产生这个现象的原因就是5.6针对limit M,N的语句采用了优先队列，而优先队列采用堆实现，比如上述的例子order by c1 asc limit 0，3 需要采用大小为3的大顶堆；limit 3，3需要采用大小为6的大顶堆。由于c1为2的记录有3条，而堆排序是非稳定的(对于相同的key值，无法保证排序后与排序前的位置一致)，所以导致分页重复的现象。为了避免这个问题，我们可以在排序中加上唯一值，比如主键id，这样由于id是唯一的，确保参与排序的key值不相同。将SQL写成如下：

select * from t1 order by c1,id asc limit 0,3;
select * from t1 order by c1,id asc limit 3,3;

案例2

两个类似的查询语句，除了返回列不同，其它都相同，但排序的结果不一致。
测试表与数据：

create table t2(id int primary key, status int, c1 varchar(255),c2 varchar(255),c3 varchar(255),key(c1));
insert into t2 values(7,1,'a',repeat('a',255),repeat('a',255));
insert into t2 values(6,2,'b',repeat('a',255),repeat('a',255));
insert into t2 values(5,2,'c',repeat('a',255),repeat('a',255));
insert into t2 values(4,2,'a',repeat('a',255),repeat('a',255));
insert into t2 values(3,3,'b',repeat('a',255),repeat('a',255));
insert into t2 values(2,4,'c',repeat('a',255),repeat('a',255));
insert into t2 values(1,5,'a',repeat('a',255),repeat('a',255));

分别执行SQL语句：

select id,status,c1,c2 from t2 force index(c1) where c1>='b' order by status;
select id,status from t2 force index(c1) where c1>='b' order by status;

执行结果如下：

简述MySQL排序原理的实例详解 - 文章图片

看看两者的执行计划是否相同

简述MySQL排序原理的实例详解 - 文章图片

为了说明问题，我在语句中加了force index的hint，确保能走上c1列索引。语句通过c1列索引捞取id，然后去表中捞取返回的列。根据c1列值的大小，记录在c1索引中的相对位置如下：

(c1,id)===(b,6),(b,3),(5,c),(c,2)，对应的status值分别为2 3 2 4。从表中捞取数据并按status排序，则相对位置变为(6,2,b),(5,2,c),(3,3,c),(2,4,c)，这就是第二条语句查询返回的结果，那么为什么第一条查询语句(6,2,b),(5,2,c)是调换顺序的呢？这里要看我之前提到的a.常规排序和b.优化排序中标红的部分，就可以明白原因了。由于第一条查询返回的列的字节数超过了max_length_for_sort_data，导致排序采用的是常规排序，而在这种情况下MYSQL将rowid排序，将随机IO转为顺序IO，所以返回的是5在前，6在后；而第二条查询采用的是优化排序，没有第二次捞取数据的过程，保持了排序后记录的相对位置。对于第一条语句，若想采用优化排序，我们将max_length_for_sort_data设置调大即可，比如2048。

简述MySQL排序原理的实例详解 - 文章图片

下面是本人关于mysql 自定义排序（field，INSTR，locate）的一点心得，希望对大家有所帮助
首先说明这里有三个函数（order by field，ORDER BY INSTR，ORDER BY locate）

原表：

 id user pass 
aaa aaa 
bbb bbb 
ccc ccc 
ddd ddd 
eee eee 
fff fff

下面是我执行后的结果：

SELECT * FROM `user` order by field(2,3,5,4,id) asc

id user pass 
aaa aaa 
ccc ccc 
ddd ddd 
eee eee 
fff fff 
bbb bbb

根据结果分析：order by field(2,3,5,4,1,6) 结果显示顺序为：1 3 4 5 6 2

SELECT * FROM `user` order by field(2,3,5,4,id) desc

id user pass 
bbb bbb 
aaa aaa 
ccc ccc 
ddd ddd 
eee eee 
fff fff

根据结果分析：order by field(2,3,5,4,1,6) 结果显示顺序为：2 1 3 4 5 6

SELECT * FROM `user` ORDER BY INSTR( '2,3,5,4', id ) ASC

id user pass 
aaa aaa 
fff fff 
bbb bbb 
ccc ccc 
eee eee 
ddd ddd

根据结果分析：order by INSTR(2,3,5,4,1,6) 结果显示顺序为：1 6 2 3 5 4

SELECT * FROM `user` ORDER BY INSTR( '2,3,5,4', id ) DESC

id user pass 
ddd ddd 
eee eee 
ccc ccc 
bbb bbb 
aaa aaa 
fff fff

根据结果分析：order by INSTR(2,3,5,4,1,6) 结果显示顺序为：4 5 3 2 1 6

SELECT * FROM `user` ORDER BY locate( id, '2,3,5,4' ) ASC

id user pass

aaa aaa 
fff fff 
bbb bbb 
ccc ccc 
eee eee 
ddd ddd

根据结果分析：order by locate(2,3,5,4,1,6) 结果显示顺序为：1 6 2 3 5 4

SELECT * FROM `user` ORDER BY locate( id, '2,3,5,4' ) DESC

 id user pass 
ddd ddd 
eee eee 
ccc ccc 
bbb bbb 
aaa aaa 
fff fff

根据结果分析：order by locate(2,3,5,4,1,6) 结果显示顺序为：4 5 3 2 1 6
如我想要查找的数据库中的ID顺序首先是（2,3,5,4）然后在是其它的ID顺序，你首先要把他降序排即（4 5 3 2），然后在 SELECT * FROM `user` ORDER BY INSTR( '4,5,3,2', id ) DESC limit 0,10 或用 SELECT * FROM `user` ORDER BY locate( id, '4,5,3,2' ) DESC 就得到你想要的结果了。

 id user pass 
bbb bbb 
ccc ccc 
eee eee 
ddd ddd 
aaa aaa 
fff fff

【相关推荐】

1. 特别推荐：“php程序员工具箱”V0.1版本下载

2. MySQL免费视频教程

3. 燕十八Oracle视频教程

内容总结

以上是互联网集市为您收集整理的简述MySQL排序原理的实例详解全部内容，希望文章能够帮你解决简述MySQL排序原理的实例详解所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/577612.html

来源：【匿名】

【上一篇】如何安装解压版MySQL_MySQL 【下一篇】用IE远程创建Mysql数据库的简易程序

更多 ►

【简述MySQL排序原理的实例详解】教程文章相关的互联网学习教程文章

mysql 排序查询字段【代码】

排序查询语法: select 查询字段1from 表where 【筛选条件】order by 要排序字段2 asc升序、desc 降序，要排字段3 asc升序、desc降序如果不写默认为升序案例:查询员工信息，要求工资从高到低排序SELECT * FROM employees ORDER BY salary DESC;#案例2：查询部门编号>=90，按入职日期升序的员工信息SELECT* FROMemployees WHEREdepartment_id >=90 ORDER BY hiredate ASC;#案例：按表达式排序，如按年薪高低显示年薪SELECTsalary...

Mysql 排序null值排序问题分析

mysql中null值的排序问题分析如下表t_user： name agezhangsan 1lisi NULLwangwu 2 www.2cto.com 执行一下sql： Sql代码 select * from t_user order by age; name agelisi NULLzhangsan 1wangwu 2 实际上我们是想将没有填写age的记录放在最后，我们可以 Sql代码 select * from t_user order by age is null, age; name agezhangsan 1wangwu 2lisi NULL 为什么会这样？可以这样来理解： Sql代码 select * from t_user or...

mysql ---排序、分组、并集操作、distinct

1、order by 排序select * from employee order by salary ASC limit 10; //查询出按salary排序最低的的10,名员工2.distinct 获取不重复的唯一值select distinct first_name from employee;3.group by 分组统计select first_name,count(*) cnt from employee group by first_name order by cnt DESC; // 按照first_name分组，并根据first_name出现次数按降序排列4.union 和 union allselect * from a union select * from b;selec...

Mysql 排序null值排序问题分析

mysql中null值的排序问题分析如下表t_user： name age zhangsan 1 lisi NULL wangwu 2 www.2cto.com 执行一下sql： Sql代码 select * from t_user order by age; name age lisi NULL zhangsan 1 wangwu 2 实际上我们是想将没有填写age的记录放在最后，我们可以 Sql代码 select * from t_user order by age is null, age; name age zhangsan 1 wangwu 2 lisi NULL 为什么会这样？可以这样来理解： Sql代...

MySQL排序号

举例：SELECT (@i:=@i+1) AS PM,A.*, U.TNAME, U.ID_NUM, U.ORG_NAME, CASE WHEN U.SEXFLAG=1 THEN 男 WHEN U.SEXFLAG=2 THEN 女 ELSE END SEX, CASE WHEN LENGTH(ID_NUM) = 18 THEN YEAR(NOW()) - CAST(SUBSTRING(ID_NUM, 7, 4) AS SIGNED) ELSE END AS AGE FROM TB_GH_MARATHON A LEFT JOIN TB_GH_USER U ON A.USER_ID = U.USER_ID ,(SELECT @i:=0) t WHERE 1=1 AND A.STATE = 1加上红色...

mysql – 排序表并获取行的位置【代码】

我有一个3行的表.播放器,时间,服务器. 现在,我想要两件事,我不知道怎么做. 对于服务器,有3个值得. 1,2和3.服务器和播放器是主键.用户是VARCHAR,服务器和时间是字符串.我用1,2和3让我更容易理解. 第一,我想按时间对表格进行排序并获得特定玩家的位置,但仅限于1个服务器. 例：User Time Server 2 10 1 1 50 1 2 60 3 1 20 2 1 100 3 2 70 2现在,想要获得用户2具有的位置 >如果按时间排序,服务器= 1 >用...

mysql的排序问题

我用order by time排序一个表格可是排出来的结果是 0 10 100 1000 1010 1020 110 120...这样的我想让排序结果是从小到大排请问能实现么? 求指教~ 回复讨论(解决方案) 你的 time 字段是字符型的？ order by time+0 就可以了 time 是什么类型把time转换成整型 order by CAST(time AS UNSIGNED) 就可以了

mysql排序问题

mysql 查询出一个数据列表这个数据列表是分页的比如说5个记录一页 $page = $_REQUEST[page];select * from user limit ($page-1)*5,5; 然后查询的数组比如说为$user_list 然后循环这个user_list foreach($user_list as $k=>$v){ // 然后根据某函数比如说 aa 计算出一个新的字段cc $user_list[$k][cc] = aa($v[id]);} 然后想按照cc这个字段排序user表遇到的问题是列表是分页的第一页排序是正常从小 ...

这条简单的mysql的排序怎么提高效率？[

select distinct A.name from table A order by (select sum(num) as num from table where name=A.name) desc 一个表table，name字段有重复，num字段是数字。。显示不重复的name，然后相同的name的num加总数量排序。。上面这条ＳＱＬ结果是正确的，就是非常慢。一万多条记录就很慢了，原因是在排序那里。。请问怎么修改才能又快又达到这样的排序功能？回复讨论(解决方案) select name, sum(num) as xxx from t...

mysql排序问题坐等大神

两个表如下 a表 d_srl title 100 a 101 b b表 c_srl d_srl 100 100 101 100 102 100 103 101 104 101 我想排列a表条件是b表里d_srl个数最多的从大到小回复讨论(解决方案) 转换成数组，用asort mysql 语句应该怎么写呢？？？？

mysql排序问题~

我现在有两个字段 addDay(添加时间)和status（状态）。我想要实现以下排序方式: 1.按addDay降序排列，并且status升序排列且status2.把status>=6的放在规则1的后面，并且按addDay降序和status升序排列 addDay status 2016-4-14 1 2016-4-14 2 2016-4-13 1 2016-4-13 2 2016-4-14 6 2016-4-13 6 请问各位大神，这样的排序，应该如何写sql语句？ ...

mysql排序的有关问题~

mysql 排序的问题~~~~~~~比如我有一个表:我现在想要的效果是，status=1的排在最前面按create_time排序，status!=1的直接按create_time排序。请各位大牛指点！~~~------解决方案-------------------- select * from tt order by status=1 desc,create_time desc;

mysql排序

mysql 排序求助PHP code 比如sql ="SELECT * FROM A WHERE `id` IN (5,18,25,4)" 现在的问题是怎么才能实现排序按照in数组（5,18,25,4）里的顺序来排序结果集？------解决方案-------------------- ... order by find_in_set(id, '5,18,25,4')

mysqlorder排序时可否用其它表中的数据来排序

mysql order排序时能否用其它表中的数据来排序？情况是这样的A表字段user dt dg a 15 10 b 17 15B表字段user title jh a xxx 1 b xxx 0 b xxxxx 0 a xxxxx 0 b xxxxx 1想要实现的是，根据A表中的user与B表中的user值得出 B表中的有多少与该user相关的数据，按数据条数从多到少排序，然后输出结果为user dt jh B表中的条数b 17 1 3a 15 1 2 --...

mysql排序有关问题

mysql排序问题SELECT * , group_concat( ' ' , concat_ws( ' X ', `sku` , `quantity-purchased` ) , ' ' ),group_concat(' ' , `order_id` , ' ') FROM `sale_orders` WHERE `shipments` =0 AND `number` =1 GROUP BY group_concat( ' ' , concat_ws( ' X ', `sku` , `quantity-purchased` ) , ' ' )我想要按照group_concat( ' ' , concat_ws( ' X ', `sku` , `quantity-purchased` ) , ' ' )这个统计出来的字段排序，请问...

首页 / MYSQL / 简述MySQL排序原理的实例详解

简述MySQL排序原理的实例详解

内容导读

内容图文

内容总结

内容备注

内容手机端

【简述MySQL排序原理的实例详解】教程文章相关的互联网学习教程文章

mysql 排序查询字段【代码】

Mysql 排序null值排序问题分析

mysql ---排序、分组、并集操作、distinct

Mysql 排序null值排序问题分析

MySQL排序号

mysql – 排序表并获取行的位置【代码】

mysql的排序问题

mysql排序问题

这条简单的mysql的排序怎么提高效率？[

mysql排序问题坐等大神

mysql排序问题~

mysql排序的有关问题~

mysql排序

mysqlorder排序时可否用其它表中的数据来排序

mysql排序有关问题

MYSQL - 相关标签

实例 - 相关标签

MYSQL - 技术教程分类

MYSQL - 最新教程

MYSQL - 最热教程