首页 / MYSQL / 一个优化MySQL查询操作的具体案例分析

一个优化MySQL查询操作的具体案例分析

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了一个优化MySQL查询操作的具体案例分析，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含7748字，纯文字阅读大概需要12分钟。

内容图文

问题描述

一个用户反映先线一个SQL语句执行时间慢得无法接受。SQL语句看上去很简单（本文描述中修改了表名和字段名):
SELECT count(*) FROM a JOIN b ON a.`S` = b.`S` WHERE a.`L` > '2014-03-30 00:55:00' AND a.`L` < '2014-03-30 01:00:00' ;

且查询需要的字段都建了索引，表结构如下：

CREATE TABLE `a` (
`L` timestamp NOT NULL DEFAULT '2000-01-01 00:00:00',
`I` varchar(32) CHARACTER SET utf8 COLLATE utf8_bin DEFAULT NULL,
`A` varchar(32) CHARACTER SET utf8 COLLATE utf8_bin DEFAULT NULL,
`S` varchar(64) CHARACTER SET utf8 COLLATE utf8_bin DEFAULT NULL,
`F` tinyint(4) DEFAULT NULL,
`V` varchar(256) CHARACTER SET utf8 COLLATE utf8_bin DEFAULT '',
`N` varchar(64) CHARACTER SET utf8 COLLATE utf8_bin DEFAULT NULL,
KEY `IX_L` (`L`),
KEY `IX_I` (`I`),
KEY `IX_S` (`S`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

CREATE TABLE `b` (
`R` timestamp NOT NULL DEFAULT '2000-01-01 00:00:00',
`V` varchar(32) DEFAULT NULL,
`U` varchar(32) DEFAULT NULL,
`C` varchar(16) DEFAULT NULL,
`S` varchar(64) DEFAULT NULL,
`I` varchar(64) DEFAULT NULL,
`E` bigint(32) DEFAULT NULL,
`ES` varchar(128) DEFAULT NULL,
KEY `IX_R` (`R`),
KEY `IX_C` (`C`),
KEY `IX_S` (`S`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

从语句看，这个查询计划很自然的，就应该是先用a作为驱动表，先后使用 a.L和b.S这两个索引。而实际上explain的结果却是：

+----+-------------+-------+-------+---------------+------+---------+----------+---------+-------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+-------+-------+---------------+------+---------+----------+---------+-------------+
| 1 | SIMPLE | b | index | IX_S | IX_S | 195 | NULL | 1038165 | Using index |
| 1 | SIMPLE | a | ref | IX_L,IX_S | IX_S | 195 | test.b.S | 1 | Using where |
+----+-------------+-------+-------+---------------+------+---------+----------+---------+-------------+

分析

从explain的结果看，查询用了b作为驱动表。

上一篇文章我们介绍到，MySQL选择jion顺序是分别分析各种join顺序的代价后，选择最小代价的方法。

这个join只涉及到两个表，自然也与optimizer_search_depth无关。于是我们的问题就是，我们预期的那个join顺序的为什么没有被选中？

MySQL Tips: MySQL提供straight_join语法，强制设定连接顺序。

explain SELECT count(*) FROM a straight_join b ON a.`S` = b.`S` WHERE a.`L` > '2014-03-30 00:55:00' AND a.`L` < '2014-03-30 01:00:00' ;

+----+-------------+-------+-------+---------------+------+---------+------+---------+---------------------------------------------+

| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |

+----+-------------+-------+-------+---------------+------+---------+------+---------+---------------------------------------------+

| 1 | SIMPLE | a | range | IX_L,IX_S | IX_L | 4 | NULL | 63 | Using where |

| 1 | SIMPLE | b | index | IX_S | IX_S | 195 | NULL | 1038165 | Using where; Using index; Using join buffer |

+----+-------------+-------+-------+---------------+------+---------+------+---------+---------------------------------------------+

MySQL Tips: explain结果中，join的查询代价可以用依次连乘rows估算。

?join顺序对了，简单的分析查询代价：普通join是1038165*1, straight_join是 63*1038165. 貌似MySQL没有错。但一定哪里不对！

发现异常

回到我们最初的设想。我们预计表a作为驱动表，是因为认为表b能够用上IX_S索引，而实际上staight_join的时候确实用上了，但这个结果与我们预期的又不同。

我们知道，索引的过滤性是决定了一个索引在查询中是否会被选中的重要因素，那么是不是b.S的过滤性不好呢？

MySQL Tips: show index from tbname返回结果中Cardinality的值可以表明一个索引的过滤性。

show index的结果太多，也可以从information_schema表中取。

mysql> select * from information_schema.STATISTICS where table_name='b' and index_name='IX_S'\G
*************************** 1. row ***************************
TABLE_CATALOG: def
TABLE_SCHEMA: test
TABLE_NAME: b
NON_UNIQUE: 1
INDEX_SCHEMA: test
INDEX_NAME: IX_S
SEQ_IN_INDEX: 1
COLUMN_NAME: S
COLLATION: A
CARDINALITY: 1038165
SUB_PART: NULL
PACKED: NULL
NULLABLE: YES
INDEX_TYPE: BTREE
COMMENT:
INDEX_COMMENT:

可以这个索引的CARDINALITY: 1038165，已经很大了。那这个表的估算行是多少呢。

show table status like 'b'\G
*************************** 1. row ***************************
Name: b
Engine: InnoDB
Version: 10
Row_format: Compact
Rows: 1038165
Avg_row_length: 114
Data_length: 119160832
Max_data_length: 0
Index_length: 109953024
Data_free: 5242880
Auto_increment: NULL
Create_time: 2014-05-23 00:24:25
Update_time: NULL
Check_time: NULL
Collation: utf8_general_ci
Checksum: NULL
Create_options:
Comment:
1 row in set (0.00 sec)

从Rows: 1038165看出，IX_S这个索引的区分度被认为非常好，已经近似于唯一索引。

MySQL Tips: 在show table status结果中看到的Rows用于表示表的当前行数。对于MyISAM表这是一个精确值，但对InnoDB这是个估算值。

虽然是估算值，但优化器是以此为指导的，也就是说，上面的某个explain里面的数据完全不符合期望：staight_join结果中第二行的rows。

阶段结论

我们发现整个错误的逻辑是这样的：以a为驱动表的执行计划，由于索引b.S的rows估计为1038165导致优化器认为代价大于以b为驱动表。而实际上这个索引的区分度为1.（当然对explan结果比较熟悉的同学会发现，第二行的type字段和Extra字段一起诡异了)

也就是说，straight_join得到的每一行去b中查询的时候，都走了全表扫描。在MySQL里面出现这种情况的最常见的是类型转换。比如一个字符串字段，虽然包含的是全数字，但查询的时候传入的不是字符串格式。

在这个case里面，两个都是字符串。因此，就是字符集相关了。

回到两个表结构，发现S字段的声明差别在于 COLLATE utf8_bin -- 这个就是本case的根本原因了：a表得到的S值是utf8_bin，优化器认为类型不同，无法直接用上索引b.IX_S过滤。

至于为什么还会用上索引，这个是因为覆盖索引带来“误解”。

MySQL Tips：若查询的所有结果能够从某个索引完全得到，则会优先用遍历索引替代遍历数据。

作为验证，

mysql> explain SELECT * FROM a straight_JOIN b ON binary a.`S` = b.`S` WHERE a.`L` > '2014-03-30 00:55:00' AND a.`L` < '2014-03-30 01:00:00' ;

+—-+————-+——-+——-+—————+——+———+——+———+————————————————+

| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |

+—-+————-+——-+——-+—————+——+———+——+———+————————————————+

| 1 | SIMPLE | a | range | IX_L | IX_L | 4 | NULL | 63 | Using where |

| 1 | SIMPLE | b | ALL | IX_S | NULL | NULL | NULL | 1038165 | Range checked for each record (index map: 0x4) |

+—-+————-+——-+——-+—————+——+———+——+———+————————————————+

由于结果是select *，无法使用覆盖索引，因此第二行的key就显示为NULL. (笔者泪：要是早出这个结果查起来可方便多了）

优化

当然最直接的想法就是修改两个表的S字段的定义，改成相同即可。这个方法可以避免修改业务代码，但DDL代价略大。这里提供两种在SQL语句方面的优化。

1、select count(*) from b join (select s from a WHERE a.`L` > '2014-03-30 00:55:00' AND a.`L` < '2014-03-30 01:00:00') ta on b.S=ta.s;

这个写法比较直观，需要注意最后b.S和ta.S的顺序

2、SELECT count(*) FROM a JOIN b ON binary a.`S` = b.`S` WHERE a.`L` > '2014-03-30 00:55:00' AND a.`L` < '2014-03-30 01:00:00' ;

从前面的分析知道是由于b.S定义为utf8_bin.

MySQL Tips: MySQL中字符集命名规则中, XXX_bin与XXX的区别为大小写是否敏感。

这里我们将A.s全部增加binary限定，先转为小写，就是将临时结果集转成utf8_bin，之后使用b.S匹配时就能够直接利用索引。

其实两个改写方法的本质相同，区别是写法1是隐式转换。理论上说写法2速度更快些。

小结

做join的字段尽量设计为类型完全相同。

您可能感兴趣的文章:

MySQL学习笔记3：表的基本操作介绍
单个select语句实现MySQL查询统计次数
sql查询出各科成绩最好的学生信息
mysql查询昨天一周前一月前一年前的数据
mysql查询今天、昨天、近7天、近30天、本月、上一月的SQL语句
MySql查询时间段的方法
MySQL查询和修改auto_increment的方法
MySQL查询倒数第二条记录实现方法
50条SQL查询技巧、查询语句示例
SQL查询出表、存储过程、触发器的创建时间和最后修改时间示例
大幅优化MySQL查询性能的奇技淫巧
SQL大量数据查询的优化及非用like不可时的处理方案
如何使用MySQL查询某个列中相同值的数量统计
SQL如何实现MYSQL的递归查询
数据库表的查询操作（实验二）
数据库表的查询操作实践演练（实验三）

内容总结

以上是互联网集市为您收集整理的一个优化MySQL查询操作的具体案例分析全部内容，希望文章能够帮你解决一个优化MySQL查询操作的具体案例分析所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/584444.html

来源：【匿名】

【上一篇】详解MySQL中UNION的用法【下一篇】用IE远程创建Mysql数据库的简易程序

更多 ►

【一个优化MySQL查询操作的具体案例分析】教程文章相关的互联网学习教程文章

关于Mysql 查询所有表的实时记录用于对比2个MySQL 库的数据是否异步【代码】【图】

Xu言：今天，为了研究一个MySQL主从同步开机后报错问题，如下图故障原因分析：经过分析，可能是主从服务器开机顺序导致。（有待下次断电再次测试）主从错误提示：日志读取错误的问题。解决方法：更新日志记录文件，重新主从同步。担心主从问题过程中有数据写入，想去确认下主从库上的数据是否一致。想到了查询下数据库行数的方式。网上查询了下，一般有2种：方法一：查看当前表的记录行数SELECT count(*) from 表名方法二：...

PHPexcel 导入import 数据到 mysql: mysql 查询数据是否存在, 如果存在返回id, 不存在, 插入返回id. 2) mysql_query , mysql_connect, mysql_select_db, mysql_error, mysql_num_rows,mysql_close【代码】【图】

一: 要求: 上面的图表中的数据插入到 3张表中.1)t_vide_warehourse 分类表: 此表中包含一级分类和二级分类. 二级分类是一级分类的子级. 2)t_video_info 包名表此表管理第一张表. 并且只有第二次分类才可以有包名 .一个二级分类下可以有多个包. 3)t_video_file 文件表. 此表关联第二张表; 一个包下可以有多个文件. ---------------------------------------------------------------------------...

介绍使用WordPress时10个常用的MySQL查询【代码】

大多数使用 WordPress 搭建的网站，其后台都是 MySQL 数据库，经常我们需要定制 WordPress 的功能，这里我们列表 10 个最有用的 WordPress 的数据库查询，你需要一个数据库的管理工具，例如 phpMyAdmin 或者 Navicat 等来执行这些 SQL 语句。1. 将所有文件的作者改为另外一个用户在修改之前，你先要知道两个不同用户的 ID，你可以在 WP 后台的 Author & User 页面中找到这个 ID，或者在查看用户信息时点击用户名的链接，地址栏中...

mysql in查询排序问题

SQL: select * from table where id IN (3,6,9,1,2,5,8,7); 这样的情况取出来后，其实，id还是按1,2,3,4,5,6,7,8,9,排序的，但如果我们真要按IN里面的顺序排序怎么办？sql: select * from table where id IN (3,6,9,1,2,5,8,7) order by field(id,3,6,9,1,2,5,8,7); 出来的顺序就是指定的顺序了原文：http://www.cnblogs.com/zhuiluoyu/p/4701745.html

mysql查询缓存总结

/*名称解释sql_cache 查询结果存入缓存（当query_cache_type=DEMAND时有效）sql_no_cache 查询结果不存入缓存query_cache_size 表示缓存的大小query_cache_type 查询缓存会话类型（0=OFF关闭查询缓存1=ON开启2=DEMAND手动通过sql_cache和sql_no_cache控制）query_cache_limit 指定单个查询能够缓存的最大查询结果query_cache_min_res_unit 为系统分配的最小缓存块大小，默认是4KB，这个值的大小和碎片的产生有直接关系query_c...

Mysql 查询区分大小写的两种方法【代码】

oracle中查询默认是区分大小写的，但是在mysql中默认不区分大小写。解决办法：mysql可以在SQL语句中加入 binary来区分大小写。BINARY不是函数，是类型转换运算符，它用来强制它后面的字符串为一个二进制字符串，可以理解为在字符串比较的时候区分大小写。一、查询语句上加binaryselect*from usersWHERE binary user_name = ‘张三‘AND status != 0二、建表时加binary create table t{code varchar(10) binary} 原文：https://ww...

MySQL 查询进阶篇【代码】

目录group by的用法集合函数的使用order by的用法having对组的管理limit的用法查重distinct的用法1.1、group by的用法create table student (sno int primary key,name char(10) not null,age int,sex char(5) not null,city char(5) not null,score int not null );insert into student(sno,name,age,sex,city,score) value(1001,"刘军",18,"男","武汉",91), (1002,"刘军",18,"男","杭州",90), (1003,"李俊杰",20,"男","北京",21)...

mysql查询数据【图】

select column,column from table where clause[limit n] [offset];查询语句中你可以使用一个或者多个表，表之间使用逗号(,)分割，并使用WHERE语句来设定查询条件,你可以使用 LIMIT 属性来设定返回的记录数。你可以通过OFFSET指定SELECT语句开始查询的数据偏移量。默认情况下偏移量为0。原文：https://www.cnblogs.com/tiantianmamababa/p/10610568.html

mysql 查询出现 "this is incompatible with sql_mode=only_full_group_by"错误解决方案，以及个人rpm方式重装所遇到的问题备份【代码】【图】

一、错误说明这个错误发生在mysql 5.7 版本及以上版本会出现的问题： mysql 5.7版本默认的sql配置是:sql_mode="ONLY_FULL_GROUP_BY"，这个配置严格执行了"SQL92标准"。很多从5.6升级到5.7时，为了语法兼容，大部分都会选择调整sql_mode，使其保持跟5.6一致，为了尽量兼容程序。二、sql层面在sql执行时，出现该原因：简单来说就是：输出的结果是叫target list，就是select后面跟着的字...

mysql 查询每张表中所有的字段名【代码】

select COLUMN_NAME from INFORMATION_SCHEMA.Columns where table_name=‘表名称‘and table_schema=‘数据库名称‘; 原文：https://www.cnblogs.com/hany-postq473111315/p/15202618.html

PHP之路——MySql查询语句【代码】

MySQL 查询语句使用进阶【代码】【图】

MySQL 查询语句使用进阶===============================================================================概述：===============================================================================练习：650) this.width=650;" title="4.png" src="/upload/getfiles/default/2022/11/7/20221107115625532.jpg" />练习1 首先导入hellodb.sql的脚本文件，查询其数据库和表如下：[root@centos7 ~]# mysql -p134296 < hellodb.sql #...

Python中让 MySQL查询结果返回字典类型的方法【代码】

Python的MySQLdb模块是Python连接MySQL的一个模块，默认查询结果返回是tuple类型，只能通过0,1..等索引下标访问数据默认连接数据库：MySQLdb.connect( host=host, user=user, passwd=passwd, db=db, port=port, charset=‘utf8‘ )复制代码打印：复制代码代码如下 for row in data: print type(row) print row执行结果：复制代码代码如下: <type ‘tuple‘> (1L,)为tuple类型...

Windows导出Mysql查询的数据Excel文件select * into outfile '文件路径' from【代码】

SELECT f_id,f_accountNum,f_addr into outfile ‘E://t1.xlsx‘ FROM tb_sg186info WHERE f_id >= 1 AND f_id <= 500000; SELECT f_id,f_accountNum,f_addr into outfile ‘E://t2.xlsx‘ FROM tb_sg186info WHERE f_id >= 500001 AND f_id <= 1000000; SELECT f_id,f_accountNum,f_addr into outfile ‘E://t3.xlsx‘ FROM tb_sg186info WHERE f_id >= 1000001 AND f_id <= 1500000; SELECT f_id,f_accountNum,f_addr into outfi...

MySQL查询机制【代码】

在MySQL中，每当查询被发送到服务端时，服务器在执行语句之前将会进行下面的检查：用户是否有权限执行该语句？用户是否有权限访问目标数据？语句的语法是否正确如果查询通过了这三个测试，就会被传递给查询优化器，它负责为查询找到最有效率的执行方式。优化器通常会做诸如确定 from 子句后面各表的连接顺序，或是可以使用哪些索引之类的工作，然后选择一个执行方案，以供服务器执行该查询。当服务器执行完查询后，将会向调用程序...

MYSQL - 技术教程分类

MySQL 教程 MySQL 安装 MySQL 管理 MySQL PHP 语法 MySQL 连接 MySQL 创建数据库 MySQL 删除数据库 MySQL 选择数据库 MySQL 数据类型 MySQL 创建数据表 MySQL 删除数据表 MySQL 插入数据 MySQL 查询数据 MySQL WHERE 子句 MySQL UPDATE 更新 MySQL DELETE 语句 MySQL LIKE 子句 MySQL UNION MySQL 排序 MySQL 分组 MySQL 连接的使用 MySQL NULL 值处理 MySQL 事务 MySQL ALTER命令 MySQL 索引 MySQL 临时表 MySQL 复制表 MySQL 元数据 MySQL 序列使用 MySQL 处理重复数据 MySQL 及 SQL 注入 MySQL 导出数据 MySQL 导入数据 MySQL 函数 MySQL 运算符 mysql 全部

MYSQL - 最热教程

sql分组取最大记录方法 mysql如何设置默认值 mysql创建数据表时指定默认值教程 MySQL 5.7 的初始化操作（root初始密码...Oracle中合并数据集(多行变一行)mysql 相同内容的字段合并为一条的方法解决mysql设置时区时的错误Unknown or ...解决ubuntu下mysql的'Access denied fo...ubuntu系统中MysqlERROR1045(28000)报错...mysql数据库设置不区分大小写

首页 / MYSQL / 一个优化MySQL查询操作的具体案例分析

一个优化MySQL查询操作的具体案例分析

内容导读

内容图文

您可能感兴趣的文章:

内容总结

内容备注

内容手机端

【一个优化MySQL查询操作的具体案例分析】教程文章相关的互联网学习教程文章

关于Mysql 查询所有表的实时记录用于对比2个MySQL 库的数据是否异步【代码】【图】

PHPexcel 导入import 数据到 mysql: mysql 查询数据是否存在, 如果存在返回id, 不存在, 插入返回id. 2) mysql_query , mysql_connect, mysql_select_db, mysql_error, mysql_num_rows,mysql_close【代码】【图】

介绍使用WordPress时10个常用的MySQL查询【代码】

mysql in查询排序问题

mysql查询缓存总结

Mysql 查询区分大小写的两种方法【代码】

MySQL 查询进阶篇【代码】

mysql查询数据【图】

mysql 查询出现 "this is incompatible with sql_mode=only_full_group_by"错误解决方案，以及个人rpm方式重装所遇到的问题备份【代码】【图】

mysql 查询每张表中所有的字段名【代码】

PHP之路——MySql查询语句【代码】

MySQL 查询语句使用进阶【代码】【图】

Python中让 MySQL查询结果返回字典类型的方法【代码】

Windows导出Mysql查询的数据Excel文件select * into outfile '文件路径' from【代码】

MySQL查询机制【代码】

MYSQL - 相关标签

MYSQL - 技术教程分类

MYSQL - 最新教程

MYSQL - 最热教程