之前也介绍MySQL高可用相关的文章： MySQL 同步复制及高可用方案总结 Mysql route介绍 什么是mysql route MySQL Router是处于应用client和dbserver之间的轻量级代理程序，它能检测，分析和转发查询到后端数据库实例，并把结果返回给client。是mysql-proxy的一个替代品。其架构图和功能如下。（1）Router实现读写分离，程序不是直接连接数据库IP，而是固定连接到mysql router。MySQL Router对前端应用是透明的。应用程序把MySQL Rou...
概述 事务是基于重做日志文件(redo log)和回滚日志(undo log)实现的。 每提交一个事务必须先将该事务的所有日志写入到重做日志文件进行持久化，数据库就可以通过重做日志来保证事务的原子性和持久性。 每当有修改事务时，还会产生undo log，如果需要回滚，则根据undo log 的反向语句进行逻辑操作，比如insert 一条记录就delete 一条记录。undo log 主要实现数据库的一致性，还可以用来实现MVCC 详解 事务操作原理:事务开启之后,所有...
一.主从复制原理Mysql要做到主从复制，就是A服务把自己所做的增删改的操作全都记录在日志中，B数据库就根据这份日志上面的操作在自己身上再操作一遍，这样就实现了主从复制；当 master 主服务器上的数据发生改变时，则将其改变写入二进制日志文件(binlog)中； salve 从服务器会在一定时间间隔内对 master 主服务器上的二进制日志进行探测，探测其是否发生过改变； 如果探测到 master 主服务器的二进制日志发生了改变，则开始一个 I...
文章目录 今日内容1 后续课程安排2 作业讲解3 python中的魔法方法setattr，getattr，setitem，getitem演示with 上下文管理器__eq__4 cookie，session，token5 django中的session底层原理6 异常处理7 pymysql的使用 作业 今日内容 1 后续课程安排 1 drf框架 2 git 3 redis使用 4 路飞项目（celery异步） 5 爬虫（mongodb） 6 linux 7 cmdb项目（资产收集） 8 代码发布系统 9 flask框架（给你一到两个项目） 10 数据结构和算法 11 do...
主库操作数据，并将数据写入Binlog 从库调用I/O线程读取主库的Binlog，并写入自己的RelayLog中，再调用SQL线程从RelayLog中解析数据，从而同步到自己的数据库中。 参考：https://mp.weixin.qq.com/s/famr7u6wEH_FT1uVdi59qQ
什么是MVCC MVCC，全称Multi-Version Concurrency Control，即多版本并发控制。MVCC是一种并发控制的方法，一般在数据库管理系统中，实现对数据库的并发访问，在编程语言中实现事务内存。 MVCC在MySQL InnoDB中的实现主要是为了提高数据库并发性能，用更好的方式去处理读-写冲突，做到即使有读写冲突时，也能做到不加锁，非阻塞并发读。 什么是当前读和快照读？ 当前读 像select lock in share mode(共享锁), select for update ; ...
索引是SQL优化中最重要的手段之一，本文从基础到原理，带你深度掌握索引。一、索引基础 1、什么是索引 MySQL官方对索引的定义为：索引（Index）是帮助MySQL高效获取数据的数据结构，索引对于良好的性能非常关键，尤其是当表中的数据量越来越大时，索引对于性能的影响愈发重要。索引优化应该是对查询性能优化最有效的手段了。索引能够轻易将查询性能提高好几个数量级。 通俗来讲，索引类似文章的目录，用来提高查询的效率。2、索引分...
一、什么是回表查询？ 二、什么是索引覆盖(Covering index)？ 三、如何实现索引覆盖？ 四、哪些场景可以利用索引覆盖来优化SQL？ 一、什么是回表查询？ 这先要从InnoDB的索引实现说起，InnoDB有两大类索引：聚集索引(clustered index) 普通索引(secondary index) InnoDB聚集索引和普通索引有什么差异？ InnoDB聚集索引的叶子节点存储行记录，因此， InnoDB必须要有，且只有一个聚集索引： （1）如果表定义了PK，则PK就是聚集索引；...
1.change master to 时，ip port user password binlog position写入到master.info进行记录 2. start slave 时，从库会启动IO线程和SQL线程 3.IO_T，读取master.info信息，获取主库信息连接主库 4. 主库会生成一个准备binlog DUMP线程，来响应从库 5. IO_T根据master.info记录的binlog文件名和position号，请求主库DUMP最新日志 6. DUMP线程检查主库的binlog日志，如果有新的，TcP(传送)给从从库的IO_T 7. IO_T将收到的日志存储到了...
MySQL官方对索引的定义为：索引（Index）是帮助MySQL高效获取数据的数据结构。 数据库查询是数据库的最主要功能之一，我们都希望查询数据的速度能尽可能的快，因此数据库系统的设计者会从查询算法的角度进行优化，这篇文章对索引做一个系统的梳理，希望对大家有帮助。 一、MySQL有哪些索引类型 索引的分类可以从多个角度进行，下面分别从数据结构，物理存储和业务逻辑三个维度进行划分。 1、从数据结构角度 （1）B+树索引(O(log(n)...
首先要了解MVCC，MVCC叫做多版本并发控制，实际上就是保存了数据在某个时间节点的快照。 我们每行数实际上隐藏了两列，创建版本号，过期(删除)版本号，每开始一个新的事务，版本号都会自动递增。 拿user表举例子，假设我们插入两条数据，他们实际上应该长这样 , 创建版本号是递增的。idnamecreate_versiondelete_version1 张三 1 2 李四 2 这时候假设小明去执行查询，此时也是会默认开启一个事务 当前版本就是 current_version...
MySQL的发展历史和版本分支： 时间里程碑1996 年MySQL1.0 发布。它的历史可以追溯到 1979 年，作者 Monty 用 BASIC 设计的一个报表工具。1996 年 10 月3.11.1 发布。MySQL 没有 2.x 版本。2000 年ISAM 升级成 MyISAM 引擎。MySQL 开源。2003 年MySQL4.0 发布，集成 InnoDB 存储引擎2005 年MySQL5.0 版本发布，提供了视图、存储过程等功能。2008 年MySQLAB 公司被 Sun 公司收购，进入 SunMySQL 时代。2009 年Oracle 收购 Sun 公司，...
MySQL索引原理 前言1、索引的本质2、索引的分类2.1、Hash 索引2.2、二叉树2.4、B树2.5、B+树 3、主键目录4、索引页5、索引页的分层6、非主键索引7.回表前言 索引，可能让好很多人望而生畏，毕竟每次面试时候 MySQL 的索引一定是必问内容，哪怕先撇开面试，就在平常的开发中，对于 SQL 的优化也而是重中之重。 可以毫不夸张的说，系统中 SQL 的好坏，是能直接决定你系统的快慢的。但是在优化之前大家是否想过一个问题？那就是：我们...
1 简介 MVCC（Multi-Version Concurrency Control）多版本并发控制，是用来在数据库中控制并发的方法，实现对数据库的并发访问用的。在MySQL中，MVCC只在读取已提交（Read Committed）和可重复读（Repeatable Read）两个事务级别下有效。其是通过Undo日志中的版本链和ReadView一致性视图来实现的。MVCC就是在多个事务同时存在时，SELECT语句找寻到具体是版本链上的哪个版本，然后在找到的版本上返回其中所记录的数据的过程。 首先需...
MySQL索引原理 MySQL 的索引 概述 索引是数据库中一个排序的数据结构，用来协助快速查询和更新数据库表中的数据；数据是以文件的形式存放在磁盘上的，每一行数据都有它的磁盘地址；当没有索引时，比如从 **500w** 条数据中检索出一条数据，只能依次遍历这张表的全部数据，直到找到这条数据。但是有了索引后，只需要在索引里去检索这条数据就可以了，因为它是一种专门进行数据检索特殊的数据结构，在找到数据存放的磁盘地址后就可以...