bitsCN.com 最近一直忙于开发业务系统，数据库从原来的Oracle被替换成了Mysql，但在实际线上运行中发现有条sql执行起来非常慢，更奇怪的是这句sql还会导致整个数据库性能下降。这个问题非常严重！该sql和表结构如下： SELECT name ,COUNT(*) AS counts ,type FROM entityNameTemp WHERE postTime > 2011-06-01 00:00:00 GROUP BY name ORDER BY counts DESC LIMIT 10 | entityNameTemp | CREATE TABLE `e...
bitsCN.com MySQL GROUP BY 操作的优化 默认情况下， MySQL 在执行 GROUP BY col1 ， col2.... 操作的时候，会按照 GROUP BY 字段的顺序进行排序。如果显式包括一个包含相同的列的 ORDER BY 子句，则对 MySQL 的实际执行性能没有什么额外的影响。 如果查询包括 GROUP BY 操作， 但是不需要对结果进行排序，或者对默认的排序结果不满意，希望获得结果后再由程序进一步处理的时候，可以指定 ORDER BY NULL 禁止排序，从而避免排序结果...
bitsCN.com MySQL数据库优化处理实现千万级快速分页分析，来看下吧。 数据表 collect ( id, title ,info ,vtype) 就这4个字段，其中 title 用定长，info 用text, id 是逐渐，vtype是tinyint，vtype是索引。这是一个基本的新闻系统的简单模型。现在往里面填充数据，填充10万篇新闻。 最后collect 为 10万条记录，数据库表占用硬盘1.6G。OK ,看下面这条sql语句： select id,title from collect limit 1000,10; 很快；基本上0.01秒就O...
bitsCN.com 2 索引及查询优化 索引的类型 普通索引：这是最基本的索引类型，没唯一性之类的限制。 唯一性索引：和普通索引基本相同，但所有的索引列值保持唯一性。 主键：主键是一种唯一索引，但必须指定为"PRIMARY KEY"。 全文索引：MYSQL从3.23.23开始支持全文索引和全文检索。在MYSQL中，全文索引的索引类型为FULLTEXT。全文索引可以在VARCHAR或者TEXT类型的列上创建。 大多数MySQL索引(PRIMARY KEY、UNIQUE、INDEX和...
bitsCN.comPERCONA PERFORMANCE CONFERENCE 2009上，来自雅虎的几位工程师带来了一篇”Efficient Pagination Using MySQL“的报告，有很多亮点，本文是在原文基础上的进一步延伸。 首先看一下分页的基本原理： mysql> explain SELECT * FROM message ORDER BY id DESC LIMIT 10000, 20/G ***************** 1. row ************** id: 1 select_type: SIMPLE table: message type: index possib...
bitsCN.com对查询进行优化，应尽量避免全表扫描，首先应考虑在where 及order by 涉及的列上建立索引: .尝试下面的技巧以避免优化器错选了表扫描： · 使用ANALYZE TABLE tbl_name为扫描的表更新关键字分布。 · 对扫描的表使用FORCE INDEX告知MySQL，相对于使用给定的索引表扫描将非常耗时。 SELECT * FROM t1, t2 FORCE INDEX (index_for_column) WHERE t1.col_name=t2.col_name； &midd...
bitsCN.com我们的项目中有好多不等于的情况。今天写这篇文章简单的分析一下怎么个优化法。 这里的分表逻辑是根据t_group表的user_name组的个数来分的。 因为这种情况单独user_name字段上的索引就属于烂索引。起不了啥名明显的效果。 1、试验PROCEDURE. DELIMITER $$Drop PROCEDURE `t_girl`.`sp_split_table`$$Create PROCEDURE `t_girl`.`sp_split_table`()BEGIN declare done int default 0; declare v_user_name v...
bitsCN.comkey_buffer_size – 这对MyISAM表来说非常重要。如果只是使用MyISAM表，可以把它设置为可用内存的30-40%。合理的值取决于索引大小、数据量以及负载。记住，MyISAM表会使用操作系统的缓存来缓存数据，因此需要留出部分内存给它们，很多情况下数据比索引大多了。尽管如此，需要总是检查是否所有的key_buffer 都被利用了。.MYI 文件只有1GB，而key_buffer 却设置为4GB 的情况是非常少的。这么做太浪费了。如果你很少使...
bitsCN.comMysql优化之加速INSERT插入一条记录花费的时间由以下几个因素决定，数字表示影响的比例： 连接：（3） 发送查询给服务器：（2） 解析查询：（2） 插入记录：（1*记录大小） 插入索引：（1*索引数量） 关闭：（1） 此处没有考虑初始化时打开数据表的开销，因为每次运行查询只会做这么一次。 如果是B-tree索引，随着索引数量的增加，插入记录的速度以logN的比例下降。 可以用以下几种方法来提高插入速度： 如果要在同一个客...
bitsCN.com1.建立基准，建立基准，建立基准！如果需要做决定的话，我们需要数据说话。什么样的查询是最糟的？瓶颈在哪？我什么情况下会写出糟糕的查询？基准测试可以让你模拟高压情况，然后借助性能测评工具，可以让你发现数据库配置中的错误。这样的工具有supersmack, ab, SysBench。这些工具可以直接测试你的数据库(譬如supersmack)，或者模拟网络流量（譬如ab）。 2.性能测试，性能测试，性能测试! 那么，当你能够建立一些高...
MySQLexplain bitsCN.com一. EXPLAIN 语法1. EXPLAIN tbl_name|SELECT select_options EXPLAIN tbl_name和DESCRIBE tbl_name的作用是一样的，用于显示表结构等信息。 当我们在select语句前加上EXPLAIN后，Mysql将告诉我们它是如何处理select语句的，提供表之间的联结方式、使用索引等有关信息。 二. 测试环境简单介绍为了节省创建表的时间，我用了joomla的文章表做测试，因为要演示优化过程，所以我事先删除了表里除主键之外的所有...
bitsCN.comMyISAM和InnoDB引擎优化 一、公共选项 skip-external-locking//避免MySQL的外部锁定，减少出错几率增强稳定性。 skip-name-resolve//禁止MySQL对外部连接进行DNS解析，使用这一选项可以消除MySQL进行DNS解析的时间。但需要注意，如果开启该选项，则所有远程主机连接授权都要使用IP地址方式，否则MySQL将无法正常处理连接请求！ max_connections = 1024//指定MySQL允许的最大连接进程数。如果在访问时经常出现Too Man...
LAMP bitsCN.com如今，开发人员不断地开发和部署使用 LAMP（Linux®、Apache、MySQL 和 PHP/Perl）架构的应用程序。但是，服务器管理员常常对应用程序本身没有什么控制能力，因为应用程序是别人编写的。这份 共三部分的系列文章 将讨论许多服务器配置问题，这些配置会影响应用程序的性能。本文是本系列文章的第三部分，也是最后一部分，将重点讨论为实现最高效率而对数据库层进行的调优。关于 MySQL 调优有 3 种方法可以加快 My...
MySQL优化 上两周一直想办法提高查询速度，取得一点效果，解决了部分问题，记下来以便将来自己查看。 由于公司没有专门的DBA，我自己对mysql数据库也不是很熟悉，而且这个JAVA开发的网络审计系统的管理系统，是经过了N多人几年时间的修修改改，今天到我们手里，要改成能支持大流量情况的版本，所以对我们这个只有几个人的JAVA组来说，确实是个难题。这个大流量的情况在以前的文章里也提到过，就是要支持每秒钟处理1G左右的网络数据...
bitsCN.comMySQL Internals-Index Merge优化Louis Hust 0 前言之前搞错了，以为Index Merge是MySQL5.6的新特性，原来不是，发现5.5也有，看了下manual，发现5.0的manual就已经存在了， 可以说是一个历史悠久的优化手段了，好吧，不管怎么样，今天就拨开其神秘的面纱，看看其内部到底如何生成这种Index Merge的计划的。 这里只详细介绍Intersect操作，对于Union和Sort-Union的具体代码，还没开始研究。 1 Index Merge理论基础Inde...