一、客户端与python在操作数据库时的差别在日常使用mysql客户端操作mysql和使用python代码操作mysql时，会发现他们不一致的地放：在mysql客户端中，不管是执行select还是执行delete等命令，都不需要commit；但在python代码中我们经常要写conn.commit()等代码。在mysql客户端中，数据删了就是删了，虽然我们经常说回滚但命令行中似乎没有可以直接回滚的命令；但在python代码中我们经常有如果执行sql语捕获到异常，则使用conn.rollba...
在数据库中，字符 型的数据是最多的，可以占到整个数据库的80%以上。为此正确处理字符型的数据，对于提高数据库的性能有很大的作用。在字符型数据中，用的最多的就是 Char与Varchar两种类型。前面的是固定长度，而后面的是可变长度。现在我们需要考虑的是，在什么情况下使用Char字符型数据，什么情况下采用 Varchar字符型数据。一、VARCHAR与CHAR字符型数据的差异在MySQL数据库中，用的最多的字符型数据类型就是Varchar和Char.。这...
微信公众号【Java技术江湖】一位阿里 Java 工程师的技术小站。作者黄小斜，专注 Java 相关技术：SSM、SpringBoot、MySQL、分布式、中间件、集群、Linux、网络、多线程，偶尔讲点Docker、ELK，同时也分享技术干货和学习经验，致力于Java全栈开发！一：Mysql原理与慢查询MySQL凭借着出色的性能、低廉的成本、丰富的资源，已经成为绝大多数互联网公司的首选关系型数据库。虽然性能出色，但所谓“好马配好鞍”，如何能够更好的使用它，...
前言： 相对于传统行业的相对服务时间9x9x6或者9x12x5。由于互联网电子商务以及互联网游戏的实时性，所以服务要求7*24小时，业务架构无论是应用还是数据库，都须要容灾互备，在mysql的体系中，最好通过在最開始阶段的数据库架构阶段来实现容灾系统。所以这里从业务宏观角度阐述下mysql架构的方方面面。一。MySQL架构设计—业务分析（1）读多写少虚线表示跨机房部署，比方电子商务系统。一个Master既有读也有些写。对读数据...
介绍使用pt-query-digest搜集慢查询日志。将数据存储在两张表中：global_query_review 和 global_query_review_history。然后使用anemometer将pt-query-digest 搜集的数据以web形式展现出来，方便查询分析。1、准备条件:a.LNMP平台b.MySQL开启慢查询 slow_query_log=on #开启数据库的慢日志 long_query_time=0.1 #时间超过0.1s的SQL记录日志中 log-slow-queries=/usr/local/mysql/data/mysql_slow.log #慢日志存放路...
关键词：MySQL Index Merge前言MySQL 的锁机制相信大家在学习 MySQL 的时候都有简单的了解过，那既然有锁就必定绕不开死锁这个问题。其实 MySQL 在大部分场景下是不会存在死锁问题的（比如并发量不高，SQL 写得不至于太拉胯的情况），但是在高并发的业务场景下，一不注意就会产生死锁，而这个死锁分析起来也比较麻烦。前段时间在公司实习的时候就遇到了一个比较奇怪的死锁，之前一直没来得及好好整理，最近有空复现了一下，算是积累...
1 背景 11.1 MVCC：Snapshot Read vs Current Read 21.2 Cluster Index：聚簇索引 31.3 2PL：Two-Phase Locking 31.4 Isolation Level 42 一条简单SQL的加锁实现分析 52.1 组合一：id主键+RC 62.2 组合二：id唯一索引+RC 62.3 组合三：id非唯一索引+RC 72.4 组合四：id无索引+RC 82.5 组合五：id主键+RR 92.6 组合六：id唯一索引+RR 92.7 组合七：id非...
***explain ****分析******* 1观察，至少跑一天，看看生产的慢SQL情况 2开启慢查询日志，设置阙值，比如超过5秒钟的就是慢SQL，并将它抓取出来 3explain+慢SQL分析 4show profile 5运维经理 or DBA，进行SQL数据库服务器的参数调优 *****总结***** 1慢查询的开启并捕获 2explain+慢SQL分析 3show profile查询SQL在Mysql服务器里面的执行细节和生命周期情况 4SQL数据库服务器的参数调优 *********...
复制原理 1. master将数据写到binlog中。 2. slave开启两个线程I/O thread和SQL thread。 3. slave的I/O thread线程连接到master，读取master上的binlog文件名称及binlog的position位置。 4. slave通过I/O thread接收master的变更信息，写入到relay log（中继日志）中。 5. 通过SQL thread读取Relay log信息进行重放到slave中。 复制解决了什么？ 个人认为复制主要作用是： 1. 备份作用，备库是主库的一个备份。 2. 读写分离，主库...
接触mysql有一年多了，但是始终是一个偶尔用用的状态，对其原理性的东西研究不够，在不少mysql相关的暑假中提到mysql体系结构，很清楚解析了mysql的各个模块分层和主要功能特性，在理解此功能特性后，会刚好的帮助我们学习mysql数据库。一 Mysql体系结构总览650) this.width=650;" src="/upload/getfiles/default/2022/11/8/20221108034418103.jpg" title="mysql体系结构.jpg" /> 在上面的体系结构图中，我们可以对其进行分层研...
行级锁有三种模式：innodb 行级锁 record-level lock大致有三种：record lock, gap lock and Next-KeyLocks。record lock 锁住某一行记录 gap lock 锁住某一段范围中的记录 next key lock 是前两者效果的叠加。 问题：行级锁表现形式：next-key lock错误码: 1213Deadlock found when trying to get lock; try restarting transaction，重点在于：Deadlock FOUND WHEN trying TO get LOCK; 表示行级锁冲突解决：解决方案，可能...
1、日常关注点的问题2、日志点分析3、checkpoint：脏页刷盘的检查点4、模糊检查点发生条件 1、master thread checkpoint 2、flush_lru_list checkpoint 3、async/sync flush checkpoint 4、dirty page too much checkpoint一、日常关注的问题 1、我们的日志生成速度？ 1、每天生成多少日志、产生多少redo logmysql> show global status like ‘Innodb_os_log_written‘; +-----------------------+--------+ | Vari...
1.MySQL主从复制入门首先，我们看一个图：影响MySQL-A数据库的操作，在数据库执行后，都会写入本地的日志系统A中。 假设，实时的将变化了的日志系统中的数据库事件操作，在MYSQL-A的3306端口，通过网络发给MYSQL-B。 MYSQL-B收到后，写入本地日志系统B，然后一条条的将数据库事件在数据库中完成。 那么，MYSQL-A的变化，MYSQL-B也会变化，这样就是所谓的MYSQL的复制，即MYSQL replication。 在上面的模型中，MYSQL-A就是主服务器，...
案例描述：一个普通的事务提交，在应用里面会提示commit超时，失败。一、理论知识1、关于commit原理，事务提交过程 1、寻找修改的数据页： 1、如果该数据页在内存中，则直接是内存读； 2、如果该数据页内存中没有，物理读，就从磁盘调入内存； 2、磁盘中的undo页调入内存； 3、先将原来的数据存入undo，然后修改数据(数据页成脏页)； 4、修改数据的信息生成redo数据存入log_buffer(内存buffer_pool的一个...
前端时间跟一个DB相关的项目，alanc反馈有一个查询，使用索引比不使用索引慢很多倍，有点毁三观。所以跟进了一下，用explain，看了看2个查询不同的结果。 不用索引的查询的时候结果如下，实际查询中速度比较块。 复制代码 代码如下:mysql> explain select * from rosterusers limit 10000,3 ; +----+-------------+-------------+------+---------------+------+---------+------+---------+-------+ | id | select_type | table |...