第一章 架构 1.1 mysql逻辑架构mysql服务器逻辑架构图如上图所示。 第一层为连接/线程处理层。每个客户端连接mysql服务器，都会拥有一个线程。服务器会缓存线程，因此无需为每一个连接新建或释放线程。mysql5.5以上的版本还提供了线程池，可以用少量线程服务大量连接。当客户端连接到服务器时，服务器需要对其认证，根据用户名主机名密码等信息，确定客户端是否有查询/更新某个数据库内某张表的权限。 第二层为mysql的核心服务功能...
Mysql 的InnoDB存储引擎实现的不是简单的行级锁，实现的是MVCC，多版本并发控制，可以理解成行级锁的一个变种。 InnoDB的MVCC是通过在每行纪录后面保存两个隐藏的列来实现的。这两个列，一个是保存了行的创建时间，一个是保存了行的过期时间（删除时间），时间是用的系统的版本号来存储的。 在select时，InnoDB会根据两个条件组合检查每行纪录： a、InnoDB只查找版本号小于等于当前事务版本号的数据行，这样可以确保这些读取的行，...
??读写分离是借助MySQL中间件 ProxySQL 实现的??ProxySQL 有两个版本：官方版和percona版，percona版是基于官方版基础上修改C++语言开发，轻量级但性能优异(支持处理千亿级数据)具有中间件所需的绝大多数功能，包括：多种方式的读/写分离 定制基于用户、基于schema、基于语句的规则对SQL语句进行路由 缓存查询结果 后端节点监控准备 ??实现读写分离前，先实现主从复制 ??注意：slave节点需要设置read_only=1主机 IP地址 类型Cent...
ref: 此类型通常出现在多表的 join 查询，针对于非唯一或非主键索引，或者是使用了 最左前缀 规则索引的查询。 例如下面这个例子中，就使用到了 ref 类型的查询：EXPLAIN SELECT * FROM user_info，order_info WHERE user_info.id = order_info.user_id AND order_info.user_id = 5\G; range: 表示使用索引范围查询，通过索引字段范围获取表中部分数据记录。这个类型通常出现在 =， <>，>，>=，<，<=，IS NULL，<=>，BETWEEN，IN()...
Zabbix环境已经部署完成：Zabbix_aget: 安装在/etc/zabbix1.开放端口10050firewall-cmd --zone=public --add-port=10050/tcp --permanentfirewall-cmd--reload 2.关闭setenforcesetenforce 0 3.vim /etc/zabbix/zabbix_agentd.d/userparameter_mysql.conf写上：####监控mysql性能的脚本UserParameter=mysql.status[*],/etc/zabbix/zabbix_agentd.d/check_ mysql.sh $1 #####监控mysql是否存活 UserParameter=mysql.ping,system...
我们在性能测试监控MYSQL数据库时，作为专业非功能性测试人员，我们需要了解操作系统工作原理、业务实现架构逻辑、应用架构实现逻辑、数据库工作原理，才能真正的做好非功能性测试，而大部分业务型交易问题都是因为数据库问题原因产生的性能瓶颈，而更多数情况都是因为对数据库出现问题的情况和处理思路不清晰。在进行MySQL的优化之前必须要了解的就是MySQL的查询过程，也就是实际前端业务操作到从磁盘捞取数据整个实现过程如果运作...
查询语句 # 普通表 SELECT * FROM test_page LIMIT m,n # 内存表 SELECT * FROM test_page_memory LIMIT m,n 总结查询位置（Offset,Size） 普通表（查询时间） 内存表（查询时间）100,100 0.004s 0.001s1000,100 0.004s 0.001s10000,100 0.007s 0.001s100000,100 0.031s 0.007s200000,100 0.06s 0.016s300000,100 0.084s 0.02s400000,100 0.112s 0.026s500000,100 0.138s 0.031s600000,100 0.166s 0.037s700000,100 0.19s 0.044s80...
* from user_info WHERE id < 300;下面是我结合我自己创建的表以及执行相关sql语句总结的相关知识点。 准备 为了接下来方便演示 EXPLAIN 的使用, 首先我们需要建立两个测试用的表, 并添加相应的数据:DROP TABLE IF EXISTS `customers`; CREATE TABLE `customers` (`customerNumber` int(11) NOT NULL,`customerName` varchar(50) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL,`contactLastName` varchar(50) CHARACTER S...
初衷 最近我的大学同学常会拿些SQL语句与我探讨如何优化，如何写出高性能的SQL。在多次交流过后，我觉得尽管我已经工作四年之久但对于SQL语句的性能与优化方面的进步并不是符合我心里的预期，所以我在周末闲暇之时，来写这篇文章，一方面是回顾SQL方面的知识，二来是为了巩固一些SQL的盲点或是薄弱点，三者也给需要这方面的同行写写自己的一些汇总。 环境与数据库 因为个人爱好，我的系统是Linux mint19；数据库版本是MySQL 5.7.23...
1.1 前言MySQL对于很多Linux从业者而言，是一个非常棘手的问题，多数情况都是因为对数据库出现问题的情况和处理思路不清晰。在进行MySQL的优化之前必须要了解的就是MySQL的查询过程，很多的查询优化工作实际上就是遵循一些原则让MySQL的优化器能够按照预想的合理方式运行而已。今天给大家体验MySQL的优化实战，助你高薪之路顺畅。 图 - MySQL查询过程1.2 优化的哲学优化有风险，涉足需谨慎1.2.1 优化可能带来的问题 优化不总是对一...
做一个积极的人 编码、改bug、提升自己 我有一个乐园，面向编程，春暖花开！ x 可以代表： 主键id、字段、1、*0 说明 对于count(主键id)来说 innodb引擎会遍历整张表，把每一行的id值都取出来，返回给server层，server层判断id值不为空，就按行累加 对于count(字段)来说 如果这个字段定义为not null，一行行的从记录里面读出这个字段，判断不为空，则累加值 如果这个字段定义允许为null，那么执行的时候，判断到有可能为null,还要把...
MySQL Sniffer 是一个基于 MySQL 协议的抓包工具，实时抓取 MySQLServer 端的请求，并格式化输出。输出内容包访问括时间、访问用户、来源 IP、访问 Database、命令耗时、返回数据行数、执行语句等。有批量抓取多个端口，后台运行，日志分割等多种使用方式，操作便捷，输出友好。同时也适用抓取 Atlas 端的请求，Atlas 是奇虎开源的一款基于MySQL协议的数据中间层项目，项目地址：同类型工具还有vc-mysql-sniffer，以及 tshark 的 -...
为了有效防止数据丢失,并将损失降到最低,应对数据库服务器做维护。数据库维护,包括数据备份,还原,导出和导入操作。1. MySQL数据库备份所谓数据库维护,主要包含备份数据,还原数据和数据库迁移,对于MySQL来说,还包括数据库对象表的导出和导入。1.1 通过复制数据文件实现数据备份造成数据损失的原因很多,主要包含如下几个方面:a. 存储介质故障:保存数据库文件的磁盘设备损坏,用户没有数据库备份导致数据彻底丢失。b. 用户的错误操作:如...
可能造成数据损失的原因有：存储介质故障：保存数据库文件的磁盘设备损坏，用户没有数据库备份导致数据彻底丢失。用户的错误操作：如误删了某些重要数据，甚至整个数据库。服务器的彻底瘫痪：如数据库服务器彻底瘫痪，系统需要重建。1. 复制数据文件（只适合存储引擎为MyISAM的表）2. mysqldump 1) 备份一个数据库 2) 备份多个数据库 3) 备份所有数据库 1. 复制数据文件 （只适合存储引擎为MyISAM的表）利用18.1.1中的备...
为了有效防止数据丢失,并将损失降到最低,应对数据库服务器做维护。数据库维护,包括数据备份,还原,导出和导入操作。1. MySQL数据库备份所谓数据库维护,主要包含备份数据,还原数据和数据库迁移,对于MySQL来说,还包括数据库对象表的导出和导入。1.1 通过复制数据文件实现数据备份造成数据损失的原因很多,主要包含如下几个方面:a. 存储介质故障:保存数据库文件的磁盘设备损坏,用户没有数据库备份导致数据彻底丢失。b. 用户的错误操作:如...