我们在使用中MySQL的时候难免会遇到大批量数据inset的情况，通常最简单的方法就是写一个insert，然后通过循环给变量赋值，批量插入数据库： //save rddformfor (int i = 0; i < rddformlist.Count; i++){string cmdText = "insert into rddform (ID,CreatedTime,ModifiedTime,CreatedBy,ModifiedBy,FormType) values (" + rddformlist[i].RddFormGuid + "," + rddformlist[i].CreateTime + ","+ rddformlist[i].Mod...
作为免费又高效的数据库，mysql基本是首选。良好的安全连接，自带查询解析、sql语句优化，使用读写锁（细化到行）、事物隔离和多版本并发控制提高并发，完备的事务日志记录，强大的存储引擎提供高效查询（表记录可达百万级），如果是InnoDB，还可在崩溃后进行完整的恢复，优点非常多。即使有这么多优点，仍依赖人去做点优化，看书后写个总结巩固下，有错请指正。 完整的mysql优化需要很深的功底，大公司甚至有专门写mysql内核的...
前言： 有一个用于历史归档的数据库（简称历史库），经过一定时间的积累，数据文件已经达到700多GB，后来决定某些数据可以不需要保留，就把这部分数据truncate了，空余出600多GB的空间，也就是说，经过收缩后，理论上数据库只有100多G。为此，我经过重建各个表（表数量不多，但单表数量还是有几千万）的聚集索引后，准备进行收缩。 但是当收缩开始时，即使把每次收缩的范围缩小到500MB，速度也极其慢，经常几个小时都没反应。经过查...
一、问题的提出 在应用系统开发初期，由于开发数据库数据比较少，对于查询SQL语句，复杂视图的的编写等体会不出SQL语句各种写法的性能优劣，但是如果将应用系统提交实际应用后，随着数据库中数据的增加，系统的响应速度就成为目前系统需要解决的最主要的问题之一。系统优化中一个很重要的方面就是SQL语句的优化。对于海量数据，劣质SQL语句和优质SQL语句之间的速度差别可以达到上百倍，可见对于一个系统不是简单地能实现其功能就可...
场景 产品中有一张图片表pics，数据量将近100万条，有一条相关的查询语句，由于执行频次较高，想针对此语句进行优化 表结构很简单，主要字段：代码如下: user_id 用户IDpicname 图片名称smallimg 小图名称一个用户会有多条图片记录，现在有一个根据user_id建立的索引：uid，查询语句也很简单：取得某用户的图片集合： 代码如下: select picname, smallimg from pics where user_id = xxx; 优化前执行查询语句（为了查看真实执行时间...
场景 产品中有一张图片表，数据量将近100万条，有一条相关的查询语句，由于执行频次较高，想针对此语句进行优化 表结构很简单，主要字段：代码如下: user_id 用户ID picname 图片名称 smallimg 小图名称一个用户会有多条图片记录 现在有一个根据user_id建立的索引：uid 查询语句也很简单：取得某用户的图片集合代码如下: select picname, smallimg from pics where user_id = xxx;优化前 执行查询语句（为了查看真实执行时间，强制...
此配置是老男孩生产线上使用的配置，在培训的时候，他给的，我在这里，对各参数添加了中文说明 这配置已经优化的不错了，如果你的mysql没有什么特殊情况的话，可以直接使用该配置参数MYSQL服务器my.cnf配置文档详解 硬件：内存16G[client] port = 3306 socket = /data/3306/mysql.sock [mysql] no-auto-rehash [mysqld] user = mysql port = 3306 socket = /data/3306/mysql.sock basedir = /usr/local/mysql datadir = /data/3306...
网上有不少mysql 性能优化方案，不过，mysql的优化同sql server相比，更为麻烦，同样的设置，在不同的环境下 ，由于内存，访问量，读写频率，数据差异等等情况，可能会出现不同的结果，因此简单地根据某个给出方案来配置mysql是行不通的，最好能使用status信息对mysql进行具体的优化。mysql> show global status;可以列出MySQL服务器运行各种状态值，另外，查询MySQL服务器配置信息语句：mysql> show variables;一、慢查询mysql> s...
今天，数据库的操作越来越成为整个应用的性能瓶颈了，这点对于Web应用尤其明显。关于数据库的性能，这并不只是DBA才需要担心的事，而这更是我们程序员需要去关注的事情。当我们去设计数据库表结构，对操作数据库时（尤其是查表时的SQL语句），我们都需要注意数据操作的性能。这里，我们不会讲过多的SQL语句的优化，而只是针对MySQL这一Web应用最多的数据库。mysql的性能优化无法一蹴而就，必须一步一步慢慢来，从各个方面进行优化，...
在上篇文章给大家介绍了mysql数据库性能优化一，今天继续接着上篇文章给大家介绍数据库性能优化相关知识。具体内容如下所示：建立适当的索引 说起提高数据库性能，索引是最物美价廉的东西了。不用加内存，不用改程序，不用调sql，只要执行个正确的create index，查询速度就可能提高百倍千倍，这可真有诱惑力。可是天下没有免费的午餐，查询速度的提高是以插入、更新、删除的速度为代价的，这些写操作，增加了大量的I/O。是不是建立...
本文的环境是Windows 10，MySQL版本是5.7.12-log 一、 基本使用 count的基本作用是有两个： 统计某个列的数据的数量；统计结果集的行数；用来获取满足条件的数据的数量。但是其中有一些与使用中印象不同的情况，比如当count作用一列、多列、以及使用*来表达整行产生的效果是不同的。 示例表如下：CREATE TABLE `NewTable` ( `id` int(11) NULL DEFAULT NULL , `name` varchar(30) NULL DEFAULT NULL , `country` varchar(50) NULL ...
mysql数据量大时使用limit分页，随着页码的增大，查询效率越低下。 实验 1.直接使用用limit start, count分页语句： select * from order limit start, count 当起始页较小时，查询没有性能问题，我们分别看下从10， 100， 1000， 10000开始分页的执行时间（每页取20条）， 如下：select * from order limit 10, 20 0.016秒select * from order limit 100, 20 0.016秒select * from order limit 1000, 20 0.047秒select * from ord...
在网上看了无数的my.cnf的配置，大多数提到的配置无外乎这几个： 1. innodb_buffer_pool_size 2. innodb_log_file_size 3. innodb_log_buffer_size 4. innodb_flush_log_at_trx_commit 然后自己写了两个例子，一个单线程的，一个多线程的来通过改变配置参数来测试是否提高了性能。结果是只有innodb_flush_log_at_trx_commit可以提高性能，对于1,2,3参数无论是开其中某一个，还是三个同时调节都没有影响到测试性能。我想了下，可...
记得在做项目的时候, 听到过一句话, 尽量不要使用子查询, 那么这一篇就来看一下, 这句话是否是正确的. 那在这之前, 需要介绍一些概念性东西和mysql对语句的大致处理. 当Mysql Server的连接线程接收到Client发送过来的SQL请求后, 会经过一系列的分解Parse, 进行相应的分析, 然后Mysql会通过查询优化器模块, 根据该Sql所涉及到的数据表的相关统计信息进行计算分析. 然后在得出一个Mysql自认为最合理最优化的数据访问方式, 也就是我们...
今天，数据库的操作越来越成为整个应用的性能瓶颈了，这点对于Web应用尤其明显。关于数据库的性能，这并不只是DBA才需要担心的事，而这更是我们程序员需要去关注的事情。当我们去设计数据库表结构，对操作数据库时（尤其是查表时的SQL语句），我们都需要注意数据操作的性能。这里，我们不会讲过多的SQL语句的优化，而只是针对MySQL这一Web应用最多的数据库。希望下面的这些优化技巧对你有用。1. 为查询缓存优化你的查询 大多数的M...