对于一些数据量较大的系统，数据库面临的问题除了查询效率低下，还有就是数据入库时间长。特别像报表系统，每天花费在数据导入上的时间可能会长达几个小时或十几个小时之久。因此，优化数据库插入性能是很有意义的。经过对MySQL innodb的一些性能测试，发现一些可以提高insert效率的方法，供大家参考参考。1. 一条SQL语句插入多条数据。常用的插入语句如：INSERTINTO `insert_table` (`datetime`, `uid`, `content`, `type`) VALUE...
一 前言前文 介绍了5.5/5.6 版本的MySQL semi sync 基础原理和配置，随着MySQL 5.7 的发布，新版本的MySQL修复了semi sync 的一些bug 并且增强了功能。支持发送binlog和接受ack的异步化; 支持在事务commit前等待ACK; 在server层判断备库是否要求半同步以减少Plugin锁冲突; 解除binlog dump线程和lock_log的冲突等等。本文重点分析 第1,2个改进项，因为原来的模式的确会影响系统的tps，新的异步模式可以提高半同步模式下的系统事务处...
一、（1）负向条件查询不能使用索引 例如：！= / not in /not exists（2）前导模糊查询不能使用索引 例如： like "%sk" （3）数据区分度不大的字段不宜使用索引 例如： 性别（4）在属性上进行计算不能命中索引 （5）如果明确知道只有一条结果返回，limit 1能够提高效率（6）把计算放到业务层而不是数据库层，除了节省数据的CPU，还有意想不到的查询缓存优化效果。 select * from order where date < = CURDAT...
笔记记录自林晓斌（丁奇）老师的《MySQL实战45讲》（本篇内图片均来自丁奇老师的讲解，如有侵权，请联系我删除）18） --为什么这些SQL语句逻辑相同，性能却差异巨大？ 本篇我们以三个例子来记录。案例一：条件字段函数操作mysql> CREATE TABLE `tradelog` (`id` int(11) NOT NULL,`tradeid` varchar(32) DEFAULT NULL,`operator` int(11) DEFAULT NULL,`t_modified` datetime DEFAULT NULL,PRIMARY KEY (`id`),KEY `tradeid` (`...
下面把代码写出来,希望大家批评指正. 首先domain对象.在这里使用的注解的方式,都是比较新的版本. User.java 复制代码 代码如下:package com.bao.sample.s3h4.domain; import javax.persistence.Column; import javax.persistence.Entity; import javax.persistence.GeneratedValue; import javax.persistence.GenerationType; import javax.persistence.Id; import javax.persistence.Table; import com.bao.sample.base.domain.Ba...
读薄《高性能MySql》(一)MySql基本知识读薄《高性能MySql》(二)Schem与数据优化选择更优的数据类型当我们设计数据类型的时候应该选择最优的数据类型，因为好的数据类型会使数据库性能提升很多，特别是在使用 ORM 的时候要尤其消息，因为需求的复杂性，ORM 基本上没什么可能会生成最优的类型。接下来介绍一些通用的数据类型结构。更小的通常更好一般情况下，应该尽量使用存储数据最小的数据单类型尽量使用自带的数据类型比如保存日期...
MySQL逻辑架构 MySQL逻辑架构整体分为三层，最上层为客户端层，并非MySQL所独有，诸如：连接处理、授权认证、安全等功能均在这一层处理。MySQL大多数核心服务均在中间这一层，包括查询解析、分析、优化、缓存、内置函数(比如：时间、数学、加密等函数)。所有的跨存储引擎的功能也在这一层实现：存储过程、触发器、视图等。最下层为存储引擎，其负责MySQL中的数据存储和提取。和Linux下的文件系统类似，每种存储引擎都有其优势和劣...
转载请注明： TheViper http://www.cnblogs.com/TheViper 这篇说下mysql查询语句优化是否请求了不需要的数据典型案例：查询不需要的记录，多表关联时返回全部列，总是取出全部列，重复查询相同的数据。是否在扫描额外的记录最简单的衡量查询开销的指标。响应数据扫描的行数返回的行数 访问类型在评估查询开销时，需要考虑下从表中找到某一行数据的成本，mysql有好多种方式可以查找并返回一行结果。有些访问方式可能需要扫描很多行才...
网上有很多的文章教怎么配置MySQL服务器，但考虑到服务器硬件配置的不同，具体应用的差别，那些文章的做法只能作为初步设置参考，我们需要根据自己的情况进行配置优化，好的做法是MySQL服务器稳定运行了一段时间后运行，根据服务器的”状态”进行优化。打开慢查询方法：其实打开mysql的慢查询日志很简单,只需要在mysql的配置文件里(windows系统是my.ini,linux系统是my.cnf)的[mysqld]下面加上如下代码：log-slow-queries = /usr/lo...
作者：晴落花香博客：http://blog.csdn.net/qing_gee 其他网站如有转载，请务必标明出处！ 前言：最近一直在做项目的性能优化，经历了一个多星期的弯路，终于找到了一个突破点，经过和同事（非常感谢，稍后他会将过程写在他的博客，我会把连接地址跟贴到本博客）的努力，我们的期货交易平台性能在服务端已经得到很好的提升。 首先我们先看一下，我的电脑（i3-3220，4G内存，没有配置innodb_buffer_pool_size参数的情况下，抛开程序...
原来使用MySql处理的数据量比较少，小打小闹的，没有关注过性能的问题。最近要处理的数据量飙升，每天至少20W行的新增数据，导致MySql在性能方面已经是差到不可用的地步了，必须要重视MySql的优化了。经验借鉴在不涉及到join查询的情况下，单个表的体积大于2g的时候，需要进行分表存储（这时表的行数应该在1000W左右，如果包含字符串类型，大约是500W行左右）。单个数据库的表数量要控制到300或400以内（赶集网DBA的说法，还有说控...
文章转载的：http://www.cnblogs.com/BeginMan/p/3754322.html一、join语法概述 join用于多表中字段之间的联系，语法如下：... FROM table1 INNER|LEFT|RIGHT JOIN table2 ON conditiona table1：左表；table2：右表 JOIN按照功能大致分为如下三类： （1）INNER JOIN（内连接或等值连接）：取得两个表中存在连接匹配关系的记录。 （2）LEFT JOIN（左连接）：取得左表（table1）完全记录，即是右表（table2）并无对应...
MySQL性能分析show profilesshow profile 和 show profiles 语句可以展示当前会话(退出session后,profiling重置为0) 中执行语句的资源使用情况。Profiling 功能由MySQL会话变量 : profiling控制,默认是OFF.关闭状态。select @@profiling; 或者show variables like ‘%profi%‘；mysql> select @@profiling; +-------------+ | @@profiling | +-------------+ | 0 | +-------------+Profiling是针对进程(process)而非线程...
早先已经做过一次OLTP性能对比测试：SAS vs SSD各种模式下MySQL TPCC OLTP对比测试结果，这次做OLAP对比测试。对比测试结果见下：650) this.width=650;" src="http://dp.imysql.com:8080/files/upload_yejr_imysql/SAS_VS_SSD_MySQL_OLAP_benchmarking_20121225.jpg" />SSD设备相应的性能提升比例：650) this.width=650;" src="http://dp.imysql.com:8080/files/upload_yejr_imysql/SAS_VS_SSD_MySQL_OLAP_benchmarking_ratio_201...
mysql监控管理工具--innotop1.innotop安装参考官网：http://innotop.googlecode.com/svn/html/installing.html# wget http://innotop.googlecode.com/files/innotop-1.9.0.tar.gz# tar -zxvf innotop-1.9.0.tar.gz # cd innotop-1.9.0安装INNOTOP工具非常简单，其是由PERL写的，当然需要PERL环境和相关的工具包。在安装之前先要确定你的系统安装了Time::HiRes,Term::ReadKey,DBI,DBD::mysql这四个包# perl -MCPAN -eshellCPAN> ins...