首页 / MYSQL / MySQL数据库下limit与join的优化方案

MySQL数据库下limit与join的优化方案

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了MySQL数据库下limit与join的优化方案，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含5343字，纯文字阅读大概需要8分钟。

内容图文

以下的文章主要描述的是MySQL数据库下limit与join的实际优化方案，我们大家都知道其在实际中的应用比例还是占为多数的，如果你对这一技术，心存好奇的话，以下的文章将会揭开它的神秘面纱。 PHP中分页肯定会使用到MySQL的limit,大部分对类似select * from ti

以下的文章主要描述的是MySQL数据库下limit与join的实际优化方案，我们大家都知道其在实际中的应用比例还是占为多数的，如果你对这一技术，心存好奇的话，以下的文章将会揭开它的神秘面纱。

PHP中分页肯定会使用到MySQL的limit,大部分对类似”select * from title where uid =** order by id desc limit m,n”很熟悉,也不是全部都能看出里面有什么不对,可是当是在大数据量下操作呢,比如百万类似”select * from title where uid =177 order by id desc limit 1234567,20″就会发现sql执行的时间明显变得很长,为什么呢?

先从MySQL数据库的limit原理说起,使用limit m,n是时候,MySQL先扫描(m+n)条记录,然后从m行开始取n行.比如上面的例子就是先扫描1234587条数据,这样的话sql能快吗?这就要求我们尽可能的减少m的值,甚至没有m直接limit n这样是sql.

看个例子:

mysql> select id,substr(mobile from 1 for 7),time,cpid,linkid from cp_mo100227 where cpid=769 limit 888888,10;  
+———-+—————————–+———————+——+———————-+  
| id | substr(mobile from 1 for 7) | time | cpid | linkid |  
+———-+—————————–+———————+——+———————-+  
| 11535090 | 1353554 | 2010-02-24 21:07:48 | 769 | 21064905903309587933 |  
| 11535091 | 1353750 | 2010-02-24 21:07:48 | 769 | 21064912943389480033 |  
| 11535093 | 1353394 | 2010-02-24 21:07:48 | 769 | 21064912945389480075 |  
| 11535098 | 1343073 | 2010-02-24 21:07:50 | 769 | 21064905865309587977 |  
| 11535100 | 1369270 | 2010-02-24 21:07:51 | 769 | 21064926770369210194 |  
| 11535103 | 1355683 | 2010-02-24 21:07:51 | 769 | 21064912944389480113 |  
| 11535104 | 1368959 | 2010-02-24 21:07:51 | 769 | 21064902508384448468 |  
| 11535105 | 1365243 | 2010-02-24 21:07:51 | 769 | 21064905907309403124 |  
| 11535106 | 1362145 | 2010-02-24 21:07:52 | 769 | 21065002511384448497 |  
| 11535107 | 1369228 | 2010-02-24 21:07:52 | 769 | 21064902514384448437 |  
+———-+—————————–+———————+——+———————-+  
10 rows in set (3.84 sec)  
 
mysql> select id,substr(mobile from 1 for 7),time,cpid,linkid from cp_mo100227 where cpid=769 and id>=11535090 limit 10;  
+———-+—————————–+———————+——+———————-+  
| id | substr(mobile from 1 for 7) | time | cpid | linkid |  
+———-+—————————–+———————+——+———————-+  
| 11535090 | 1353554 | 2010-02-24 21:07:48 | 769 | 21064905903309587933 |  
| 11535091 | 1353750 | 2010-02-24 21:07:48 | 769 | 21064912943389480033 |  
| 11535093 | 1353394 | 2010-02-24 21:07:48 | 769 | 21064912945389480075 |  
| 11535098 | 1343073 | 2010-02-24 21:07:50 | 769 | 21064905865309587977 |  
| 11535100 | 1369270 | 2010-02-24 21:07:51 | 769 | 21064926770369210194 |  
| 11535103 | 1355683 | 2010-02-24 21:07:51 | 769 | 21064912944389480113 |  
| 11535104 | 1368959 | 2010-02-24 21:07:51 | 769 | 21064902508384448468 |  
| 11535105 | 1365243 | 2010-02-24 21:07:51 | 769 | 21064905907309403124 |  
| 11535106 | 1362145 | 2010-02-24 21:07:52 | 769 | 21065002511384448497 |  
| 11535107 | 1369228 | 2010-02-24 21:07:52 | 769 | 21064902514384448437 |  
+———-+—————————–+———————+——+———————-+  
10 rows in set (0.00 sec)  
 
mysql> select id,substr(mobile from 1 for 7),time,cpid,linkid from cp_mo100227 where cpid=769 and time>=’2010-02-24 21:07:48′ limit 10;  
+———-+—————————–+———————+——+———————-+  
| id | substr(mobile from 1 for 7) | time | cpid | linkid |  
+———-+—————————–+———————+——+———————-+  
| 11535090 | 1353554 | 2010-02-24 21:07:48 | 769 | 21064905903309587933 |  
| 11535091 | 1353750 | 2010-02-24 21:07:48 | 769 | 21064912943389480033 |  
| 11535093 | 1353394 | 2010-02-24 21:07:48 | 769 | 21064912945389480075 |  
| 11535098 | 1343073 | 2010-02-24 21:07:50 | 769 | 21064905865309587977 |  
| 11535100 | 1369270 | 2010-02-24 21:07:51 | 769 | 21064926770369210194 |  
| 11535103 | 1355683 | 2010-02-24 21:07:51 | 769 | 21064912944389480113 |  
| 11535104 | 1368959 | 2010-02-24 21:07:51 | 769 | 21064902508384448468 |  
| 11535105 | 1365243 | 2010-02-24 21:07:51 | 769 | 21064905907309403124 |  
| 11535106 | 1362145 | 2010-02-24 21:07:52 | 769 | 21065002511384448497 |  
| 11535107 | 1369228 | 2010-02-24 21:07:52 | 769 | 21064902514384448437 |  
+———-+—————————–+———————+——+———————-+  
10 rows in set (0.01 sec)

例中数据表id是主键,time也建了索引,表中总数据约为240w行,其中cpid为769的数据量大约为90w条.这里面的id和时间可能会是不连续的.故不能直接得获取id>m这样操作

所以可以显示 “1，2，3，4，5,末页” 或是 “首页，<<100,101,102,103 >>末页”这样,这样可以极大的减少m值!

MySQL里面的join顺便说一句就是,通常有点讲究的是用小表去驱动大表,而由于MySQL join实现的原理就是做循环比如left join就是对左边的数据进行循环去驱动右边的表,比如左边是可能会有m条记录匹配,右边有n条记录那么就是做m次循环,每次扫描n行数据,总扫面行数是 m*n行数据.左边返回的结果集的大小就决定了循环的次数,故单纯的用小表去驱动大表不一定的正确的。

小表的结果集可能也大于大表的结果集,所以写 join的时候尽可能的先估计两张表的可能结果集,用小结果集去驱动大结果集.值得注意的是在使用left/right join的时候,从表的条件应写在on之后,主表应写在where之后.否则MySQL数据库会当作普通的连表查询!

TAG标签：

内容总结

以上是互联网集市为您收集整理的MySQL数据库下limit与join的优化方案全部内容，希望文章能够帮你解决MySQL数据库下limit与join的优化方案所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/559466.html

来源：【匿名】

【上一篇】MySQL存储引擎中InnoDB与MyISAM的不同之处【下一篇】用IE远程创建Mysql数据库的简易程序

更多 ►

【MySQL数据库下limit与join的优化方案】教程文章相关的互联网学习教程文章

从入门到自闭之Python--MySQL数据库的单表操作【代码】

单表查询：select * from 表 where 条件 group by 分组 having 过滤 order by 排序 limit n;语法：select distinct 字段1，字段2... from 表名 where 条件 group by 组名 having 筛选 order by 排序 limit 限制条数找到表:from拿着where指定的约束条件，去文件/表中取出一条条记录将取出的一条条记录进行分组group by，如果没有group by，则整体作为一组执行select（去重）：select * from 表名;将分组的结果进行having过滤将结果按...

备份mysql数据库【图】

使用navicate 使用命令备份mysqldump -hlocalhost -uroot -prootdatabases > C:\Users\asus008\Desktop\mp4\databases.sql还原mysql -hlocalhost -uroot -proot databases < C:\Users\asus008\Desktop\mp4\databases.sql备份多个数据库mysqldump -hlocalhost -uroot -proot --databases oa tele > C:\Users\asus008\Desktop\mp4\databasesf.sql备份所有数据库mysqldump --all -databases -hlocalhost -uroot -proot > C:\Users\as...

Ubuntu下取消MySQL数据库本机绑定限制方法

出现问题：在Ubuntu系统中，添加了MySQL账户，赋予了数据库完全操作权限，并且允许数据库从外部链接但是，还是无法远程访问MySQL数据库。原因：Ubuntu系统中，默认安装的MySQL限制了只有本机才能访问数据库解决办法：取消MySQL数据库的本机绑定限制nano /etc/mysql/my.cnf #编辑配置文件找到bind-address = 127.0.0.1改为#bind-address = 127.0.0.1ctrl+o #保存配置ctrl+x #退出/etc/init.d/mysql restart #重启数据库现在已经可以...

MySQL数据库web维护管理软件【图】

TreeSoft数据库管理系统使用JAVA开发，采用稳定通用的springMVC +JDBC架构，实现基于WEB方式对 MySQL，Oracle，PostgreSQL 等数据库进行维护管理操作。功能包括：数据库的展示,库表的展示，表字段结构的展示， SQL语句的在线编辑批量执行，表结构的在线设计维护，数据的在线编辑维护，查询语句保存，JSON数据格式化，SQL语法帮助，在线数据源选择配置等。系统内置14套UI皮肤，45套代码编辑区UI方案，使用中可以依个人喜好选择配...

mysql数据库相关基础知识01【代码】

数据库的简介1.什么是数据库：数据仓库。访问必须只能用SQL语句来访问。数据库也是一个文件的系统。 2.数据库的作用：存储数据的作用。开发任何的应用，都有数据库。 3.关系型的数据库：数据库中保存的都是实体与实体之间的关系。 4.常见的数据库* Java开发，必用的两个数据库Oracle和MySQL* Oracle数据库（甲骨文）大型的数据库，收费的。* MySQL数据库小型的数据库，免费开源的。被Oracle收购了（在6.x版本下开始收费了）*...

python连接mysql数据库

1.系统必须安装MySQL-python软件，否则python没有连接的模块(在Linux系统)yum install MySQL-python2.安装mysql数据库yum install mysql-server mysql[root@AY140528120357495c4bZ ~]# /etc/init.d/mysqld restartStopping mysqld: [ OK ]Starting mysqld: [ OK ][root@AY140528120357495c4bZ ~]#3.在mysql中创建数据库和表[root@AY1405...

配置MySQL数据库【图】

一、配置MySQL数据库1、解压绿色版mysql，如下图二、安装服务1、运行cmd（管理员版本，否则没有权限），如下图 2、运行命令mysqld –install安装服务，如下图：如果不需要mysql里，只需要运行mysqld –remove即可移除，如下图 3、运行net start mysql 启动服务，如下图如需要配置是否开机启动mysql可以在windows服务里面配置。三、客户端测试1、mysql –uroot –p 如下图四、配置编码为UTF-81、在mysql5.6的根目录下，复制my-d...

MYSQLshu数据库学习----查询

查询语句是MYSQL数据库中用到的最多的语句。查询语句分为几种单表查询集合函数查询连接查询子查询合并查询正则表达式查询一：单表查询SELECT 属性 FROM 表名 [WHERE 查询条件][GROUP BY 属性名1 [HAVING 分组条件]][ORDER BY 属性2 [ASC/DESC]][LIMIT];WHERE 查询条件查询条件符号或关键字例子比较=、<、<=、>、>=、!=、<>、!>、!<WHERE ID = 1指定范围BETWEEN AND、NOT BETWEEN ANDWHERE ID BETWEEN 2 AND 3指定集合IN、NOT INWH...

MYSQL数据库导入数据时出现乱码的解决办法

首先在新建数据库时一定要注意生成原数据库相同的编码形式，如果已经生成可以用phpmyadmin等工具再整理一次，防止数据库编码和表的编码不统一造成乱码。方法一: 通过增加参数 –default-character-set = utf8 解决乱码问题mysql -u root -p password < path_to_import_file –default-character-set = utf8 方法二: 在命令行导入乱码解决1. use database_name; 2. set names utf8; (或其他需要的编码) 3. source example.sql (sql...

mysql数据库表格导出为excel表格【代码】

在本地数据库中操作如下：由于excel表格的编码是GBK，所以导出时要加一个设置字符编码；select*from 某个表 into outfile ‘d:/文件名.xls‘CHARACTERSET gbk; 原文：http://www.cnblogs.com/luwenjie110/p/4336988.html

如何设置才能远程登录Mysql数据库【代码】【图】

可以在一台机器上访问另一台机器的MySQL，但是需要一些设置。进入MySQL后，输入以下命令： GRANT ALL PRIVILEGES ON *.* TO ‘tigase‘@‘%‘ IDENTIFIED BY ‘123456‘ WITH GRANT OPTION;允许任何主机以tigase为用户名（root用户不能远程登录，只能本地登录），123456为密码访问MySQL。flush privileges;让MySQL重新加载权限，使赋予的权限能够马上生效。原文：http://www.jb51.net/article/54407.htm

linux下如何实现mysql数据库每天自动备份定时备份【代码】【图】

概述??备份是容灾的基础，是指为防止系统出现操作失误或系统故障导致数据丢失，而将全部或部分数据集合从应用主机的硬盘或阵列复制到其它的存储介质的过程。而对于一些网站、系统来说，数据库就是一切，所以做好数据库的备份是至关重要的！备份是什么？为什么要备份容灾方案建设存储介质光盘磁带硬盘磁盘阵列 DAS：直接附加存储 NAS：网络附加存储 SAN：存储区域网络云存储这里主要以本地磁盘为存储介质讲一下计划任务的...

ThinkPHP学习（三）配置PHP5支持MySQL，连接MySQL数据库【图】

配置PHP5支持MySQL打开PHP配置文件“F:\PHP\php5328Win32\php.ini”，查找“extension=php_mysql.dll”，把前面的分号去掉，保存文件，启动服务；却提示“PHP startup: Unable to load dynamic library :F:\PHP\php_mysql.dll”错误，解决办法，打开PHP配置文件“F:\PHP\php5328Win32\php.ini”，查找“extension_dir = "ext"”，把前面的分号去掉，保存文件，启动服务，问题解决；准备测试数据如果你还没有安装MySQL，请先安装MyS...

全网最全一篇MySQL数据库MVCC详解，不全你打我【图】

什么是MVCC全称Multi-Version Concurrency Control，即多版本并发控制，主要是为了提高数据库的并发性能。以下文章都是围绕InnoDB引擎来讲，因为myIsam不支持事务。同一行数据平时发生读写请求时，会上锁阻塞住。但mvcc用更好的方式去处理读—写请求，做到在发生读—写请求冲突时不用加锁。这个读是指的快照读，而不是当前读，当前读是一种加锁操作，是悲观锁。那它到底是怎么做到读—写不用加锁的，快照读和当前读又是什么鬼，跟着...

Spring Batch示例: 读取CSV文件并写入MySQL数据库【代码】

Spring Batch示例: 读取CSV文件并写入MySQL数据库GitHub版本: https://github.com/kimmking/SpringBatchReferenceCN/blob/master/01_introduction/Spring_Batch_MySQL.md原文链接: Reading and writing CVS files with Spring Batch and MySQL原文作者: Steven Haines - 技术架构师下载本教程的源代码: SpringBatch-CSV演示代码用批处理程序来操作动辄上GB的数据很可能会拖死整个系统,但现在我们可以通过Spring Batch将其拆解为多...

MYSQL - 技术教程分类

MySQL 教程 MySQL 安装 MySQL 管理 MySQL PHP 语法 MySQL 连接 MySQL 创建数据库 MySQL 删除数据库 MySQL 选择数据库 MySQL 数据类型 MySQL 创建数据表 MySQL 删除数据表 MySQL 插入数据 MySQL 查询数据 MySQL WHERE 子句 MySQL UPDATE 更新 MySQL DELETE 语句 MySQL LIKE 子句 MySQL UNION MySQL 排序 MySQL 分组 MySQL 连接的使用 MySQL NULL 值处理 MySQL 事务 MySQL ALTER命令 MySQL 索引 MySQL 临时表 MySQL 复制表 MySQL 元数据 MySQL 序列使用 MySQL 处理重复数据 MySQL 及 SQL 注入 MySQL 导出数据 MySQL 导入数据 MySQL 函数 MySQL 运算符 mysql 全部

MYSQL - 最热教程

sql分组取最大记录方法 mysql如何设置默认值 mysql创建数据表时指定默认值教程 MySQL 5.7 的初始化操作（root初始密码...Oracle中合并数据集(多行变一行)mysql 相同内容的字段合并为一条的方法解决mysql设置时区时的错误Unknown or ...解决ubuntu下mysql的'Access denied fo...ubuntu系统中MysqlERROR1045(28000)报错...mysql数据库设置不区分大小写

首页 / MYSQL / MySQL数据库下limit与join的优化方案

MySQL数据库下limit与join的优化方案

内容导读

内容图文

内容总结

内容备注

内容手机端

【MySQL数据库下limit与join的优化方案】教程文章相关的互联网学习教程文章

从入门到自闭之Python--MySQL数据库的单表操作【代码】

备份mysql数据库【图】

Ubuntu下取消MySQL数据库本机绑定限制方法

MySQL数据库web维护管理软件【图】

mysql数据库相关基础知识01【代码】

python连接mysql数据库

配置MySQL数据库【图】

MYSQLshu数据库学习----查询

MYSQL数据库导入数据时出现乱码的解决办法

mysql数据库表格导出为excel表格【代码】

如何设置才能远程登录Mysql数据库【代码】【图】

linux下如何实现mysql数据库每天自动备份定时备份【代码】【图】

ThinkPHP学习（三）配置PHP5支持MySQL，连接MySQL数据库【图】

全网最全一篇MySQL数据库MVCC详解，不全你打我【图】

Spring Batch示例: 读取CSV文件并写入MySQL数据库【代码】

MYSQL - 相关标签

数据库 - 相关标签

MYSQL - 技术教程分类

MYSQL - 最新教程

MYSQL - 最热教程