本文整理自《MySQL技术内幕 InnoDB存储引擎》 MySQL通过后台各种线程、内存池、文件交互来实现对外服务的，不同线程实现不同的资源操作，各个线程相互协助，共同来完成数据库的服务。以下简单总结MySQL的一些后台线程以及主要作用，以及innodb引擎的变化升级情况。整体上看，MySQL的后台线程概括如下，分为master thread，IO thread，purge thread，page cleaner thread 这其中，Master Thread是MySQL的最核心的线程，其中实现了多...
在往mysql中插入条目时有时会希望能得到该插入条目的id，一种方式是再执行一个select语句条件为max(id)来获取，但这种形式在并发环境里并不是线程安全的，因为在你完成插入到再执行一个select获取最大id之间可能已经有另一个条目被插入。一种线程安全的解决方式是采用select LAST_INSERT_ID()这个语句，它返回本次链接（每个数据库链接由一个线程承担）中第一次插入的条目的ideg.(1)、在连接1中向A表插入一条记录，A表包含一个auto...
MySQL 5.6之前的版本，同步复制是单线程的，队列的，只能一个一个执行，在5.6里，可以做到多个库之间的多线程复制，例如数据库里，存放着用户表，商品表，价格表，订单表，那么将每个业务表单独放在一个库里，这时就可以做到多线程复制，但一个库里的表，多线程复制是无效的。注，每个数据库仅能使用一个线程，复制涉及到多个数据库时多线程复制才有意义。.环境准备操作系统· CentOS 6.4 x86_64· 软件版本· Mysql 5.6.13· 1.实验拓...
出现的错误：ERROR 1205 (HY000): Lock wait timeout exceeded; try restarting transaction解决办法：查看sleep的进程mysql> show full processlist; +-------+----------+-------------------+----------+---------+-------+----------+-----------------------------------------------------------------------------+ | Id | User | Host | db | Command | Time | State | Info ...
innodb是一个多线程并发的存储引擎，内部的读写都是用多线程来实现的，所以innodb内部实现了一个比较高效的并发同步机制。innodb并没有直接使用系统提供的锁(latch)同步结构，而是对其进行自己的封装和实现优化，但是也兼容系统的锁。我们先看一段innodb内部的注释（MySQL-3.23）:Semaphore operations in operating systems are slow: Solaris on a 1993 Sparc takes 3 microseconds (us) for a lock-unlock pair and Windows NT ...
前言在 MySQL 中，线程独享内存主要用于各客户端连接线程存储各种操作的独享数据，如线程栈信息，分组排序操作，数据读写缓冲，结果集暂存等等，而且大多数可以通过相关参数来控制内存的使用量。 线程栈信息使用内存(thread_stack)主要用来存放每一个线程自身的标识信息，如线程id，线程运行时基本信息等等，我们可以通过 thread_stack 参数来设置为每一个线程栈分配多大的内存。 排序使用内存(sort_buffer_size)MySQL 用此内存区域...
首先我们来看一个公式，MySQL中内存分为全局内存和线程内存两大部分（其实并不全部，只是影响比较大的 部分）：复制代码 代码如下:per_thread_buffers=(read_buffer_size+read_rnd_buffer_size+sort_buffer_size+thread_stack+join_buffer_size+binlog_cache_size+tmp_table_size)*max_connectionsglobal_buffers=innodb_buffer_pool_size+innodb_additional_mem_pool_size+innodb_log_buffer_size+key_buffer_size+query_cache_si...
线程池是Mysql5.6的一个核心功能，对于服务器应用而言，无论是web应用服务还是DB服务，高并发请求始终是一个绕不开的话题。当有大量请求并发访问时，一定伴随着资源的不断创建和释放，导致资源利用率低，降低了服务质量。线程池是一种通用的技术，通过预先创建一定数量的线程，当有请求达到时，线程池分配一个线程提供服务，请求结束后，该线程又去服务其他请求。 通过这种方式，避免了线程和内存对象的频繁创建和释放，降低了服务...
前言：我们常用 show processlist 或 show full processlist 查看数据库连接状态，其中比较关注的是 State 列，此列表示该连接此刻所在的状态。那么你真的了解不同 State 值所表示的状态吗？下面我们参考官方文档来一探究竟 。 以MySQL 5.7版本为例官方文档地址：https://dev.mysql.com/doc/refman/5.7/en/general-thread-states.html简单翻译下：After create当线程在创建表的函数末尾创建表（包括内部临时表）时，会发生这种情况...
开启general log会将所有到达MySQL Server的SQL语句记录下来。一般不会开启开功能，因为log的量会非常庞大。但个别情况下可能会临时的开一会儿general log以供排障使用。 相关参数一共有3：general_log、log_output、general_log_file show variables like ‘general_log‘; -- 查看日志是否开启show variables like ‘log_output‘; -- 看看日志输出类型 table或fileshow variables like ‘general_log_file‘; -- 看看日志文...
基础知识基于 COMMIT_ORDER 的并行复制只有在有压力的情况下才可能会形成一组，压力不大的情况下在从库的并行度并不会高。但是基于 WRITESET 的并行复制目标就是在ORDER_COMMIT 的基础上再尽可能的降低 last commit ，这样在从库获得更好的并行度（即便在主库串行执行的事务在从库也能并行应用）。它使用的方式就是通过扫描 Writeset 中的每一个元素（行数据的 hash 值）在一个叫做 Writeset 的历史 MAP（行数据的 hash 值和 seq n...
如果遇到死锁了，怎么解决呢？找到原始的锁ID，然后KILL掉一直持有的那个线程就可以了， 但是众多线程，可怎么找到引起死锁的线程ID呢？ MySQL 发展到现在，已经非常强大了，这个问题很好解决。 直接从数据字典连查找。我们来演示下。线程A，我们用来锁定某些记录，假设这个线程一直没提交，或者忘掉提交了。 那么就一直存在，但是数据里面显示的只是SLEEP状态。 mysql> set @@autocommit=0;Query OK, 0 rows affected (0.00 sec)m...
线程栈信息使用内存(thread_stack)主要用来存放每一个线程自身的标识信息，如线程id，线程运行时基本信息等等，我们可以通过 thread_stack 参数来设置为每一个线程栈分配多大的内存。 排序使用内存(sort_buffer_size)MySQL 用此内存区域进行排序操作（filesort），完成客户端的排序请求。当我们设置的排序区缓存大小无法满足排序实际所需内存的时候，MySQL 会将数据写入磁盘文件来完成排序。由于磁盘和内存的读写性能完全不在一个数...
上个礼拜，之前的一个同事突然联系我说他去面了联想的JAVA开发工程师，想分享一下面试经历和面试题。我当时就拍板说，好啊！ 然后就整理了一下，写了这篇文章；和大家分享一下这次面试经验和面试题。薪资还可以啊，年薪40W+啊！多少人的梦想啊！ 言归正传，和大家分享一下这次联想的面经和面试题： 联想面经：第一轮：电话初面 第二轮：技术面谈 第三轮：高管复试 第四轮：HR最后确认No.1：第一轮面试——电话初面 首先确认对联想的...
首先我们来看一个公式，MySQL中内存分为全局内存和线程内存两大部分（其实并不全部，只是影响比较大的 部分）： 代码如下:per_thread_buffers=(read_buffer_size+read_rnd_buffer_size+sort_buffer_size+thread_stack+join_buffer_size+binlog_cache_size+tmp_table_size)*max_connectionsglobal_buffers=innodb_buffer_pool_size+innodb_additional_mem_pool_size+innodb_log_buffer_size+key_buffer_size+query_cache_sizetotal_...