首页 / MYSQL / 腾讯云数据库团队：MySQL语句复制（SBR）的缺陷列举

腾讯云数据库团队：MySQL语句复制（SBR）的缺陷列举

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了腾讯云数据库团队：MySQL语句复制（SBR）的缺陷列举，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含3304字，纯文字阅读大概需要5分钟。

内容图文

作者介绍：赵伟腾讯云TDSQL数据库开发者

MySQL (这里的MySQL是指广义的mysql，包括oracle，mysql，percona，mariadb等)的Statement Based Replication (SBR)是一个暗坑无数的功能，可能导致主备机数据不一致，以及其它问题，所以在TDSQL中我们使用RBR。这里就列举几条SBR的坑。

在此之前，先说说SBR的有点。与Row based Replication (RBR)相比，它可以避免传输大量的binlog日志从而减小网络和存储系统(binlog文件）的负载。另外，某些时候在备机上面重新执行SQL语句反而会比逐条执行RBR的binlog要快，一个极端的例子是，如果一个表没有主键，然后一个delete/update语句需要删除/更新大量的行，那么使用RBR将是噩梦，因为备机处理每一条这样的binlog都会导致全表扫描从而大大降低备机的性能(所以在TDSQL中我们默认强制创建含有主键的表)。但是使用SBR的话，一次执行即可更新/删除全部行，这样就快了很多。

下面正式开始批评SBR了。

首先，由于SBR模式下，SQL语句到了备机需要被重新执行，与RBR相比，就增加了重新执行SQL语句的额外开销，包括解析，优化和执行SQL语句。RBR则直接调用mysql的存储引擎接口(handler API)来执行行的插入、删除和更新，完全跳过了mysql的优化器的处理逻辑。

SQL语句到了备机需要被重新执行，在多种情况下就会导致主备机数据不一致，比如一个SQL语句调用了用户定义的函数，调用了返回随机值的函数，在数据表中使用了自增列，以及使用了上下文数据（context data,比如用一个表的行数作为某个插入字段值，或者在update/delete语句中使用了limit子句）等等。

另一个一致性陷阱在于使用MyISAM等非事务存储引擎。在完全使用innodb等事务存储引擎的情况下，MySQL replication是crash safe的，也就是说，无论任何时刻mysql server crash了，或者OS crash了，或者机器断电了，mysql server都可以恢复数据到crash之前的状态，确保事务的持久性和一致性，确保所有之前提交的事务的改动都存在，因为innodb自身支持事务，可以恢复，并且在近年版本的mysql和mariadb中，innodb可以使用到binlog数据来完成恢复。（尽管组提交时候并没有刷盘commit日志）但是一旦使用了非事务存储引擎，那么一个事务的完整性就不存在了，也不是crash safe的了。在master和slave上面都是这样。虽然mysql的各个分支和版本在replication实现中做了很多努力来避免一些问题，并且给用户强制了一大堆暗坑无数的DOs&DONTs,但是无法完全解决这个问题。当发生了crash之后，只要一个事务读取并且/或者写入到了MyISAM表，那么这个事务的改动可能部分存在，部分消失，并且binlog与数据表也可能会有各种不同，然后，用户的数据就无法使用了。

第三，在使用innodb/xtradb并且隔离级别是read committed时候，如果设置binlog_format为statement，那么mysql会拒绝后续的插入/更新/删除操作，错误信息是：

ERROR 1665 (HY000): Cannot execute statement: impossible to write to binary log since BINLOG_FORMAT = STATEMENT and at least one table uses a storage engine limited to row-based logging. InnoDB is limited to row-logging when transaction isolation level is READ COMMITTED or READ UNCOMMITTED.

但是在设置这两个变量的时候却并没有报错。这个组合也是会导致slave在并发执行时候的数据一致性问题。所以，还是推荐大家使用RBR和INNODB（或者其他支持事务的存储引擎）的搭配，我们一直用它：）

MySQL AHI 实现解析

腾讯云TDSQL数据库系统架构介绍

此文已由作者授权腾讯云技术社区发布，转载请注明文章出处，获取更多云计算技术干货，可请前往腾讯云技术社区

欢迎大家关注腾讯云技术社区-博客园官方主页，我们将持续在博客园为大家推荐技术精品文章哦~

腾讯云数据库团队：MySQL语句复制（SBR）的缺陷列举

标签：log read 包括 upd 额外 imp dos 函数 ror

本文系统来源：http://www.cnblogs.com/qcloud1001/p/6564469.html

内容总结

以上是互联网集市为您收集整理的腾讯云数据库团队：MySQL语句复制（SBR）的缺陷列举全部内容，希望文章能够帮你解决腾讯云数据库团队：MySQL语句复制（SBR）的缺陷列举所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/476728.html

来源：【匿名】

【上一篇】mysql定时任务【下一篇】用IE远程创建Mysql数据库的简易程序

更多 ►

【腾讯云数据库团队：MySQL语句复制（SBR）的缺陷列举】教程文章相关的互联网学习教程文章

MySQL(语句)【代码】

视图视图是一个虚拟表（非真实存在），其本质是【根据SQL语句获取动态的数据集，并为其命名】，用户使用时只需使用【名称】即可获取结果集，并可以将其当作表来使用。1、创建视图CREATE VIEW v1 AS SELET nid, name FROMA WHEREnid > 4 2、删除视图 DROP VIEW v1 3.修改ALTER VIEW v1 AS SELET A.nid,B. NAME FROMA LEFT JOIN B ON A.id = B.nid LEFT JOIN C ON A.id = C.nid WHEREA.id > 2 AND C.nid < 5 4、使用视图select * fr...

如何查找MySQL中查询慢的SQL语句【图】

如何在mysql查找效率慢的SQL语句呢？这可能是困然很多人的一个问题，MySQL通过慢查询日志定位那些执行效率较低的SQL 语句，用--log-slow-queries[=file_name]选项启动时，mysqld 会写一个包含所有执行时间超过long_query_time 秒的SQL语句的日志文件，通过查看这个日志文件定位效率较低的SQL 。下面介绍MySQL中如何查询慢的SQL语句一、MySQL数据库有几个配置选项可以帮助我们及时捕获低效SQL语句 1，slow_query_log这个参数设置为O...

MySql命令行命令和SQL语句

一.常用mysql命令行命令　　1.启动MYSQL服务 net start mysql　　　停止MYSQL服务 net stop mysql　　2.netstat -na|findstr 3306 查看被监听的端口，findstr用于查找后面的端口是否存在　　3.在命令行中登录MYSQL控制台，即使用MYSQL COMMEND LINE TOOL　　　　语法格式 mysql -user=root -password=123456 db_name　　　　或者简写格式　　mysql -uroot -p123456 db_name　　　　或者可以不写密码，不写数据库，像这样 mysql -...

mysql从一个表中拷贝数据到另一个表中sql语句

这一段在找新的工作，今天面试时，要做一套题，其中遇到这么一句话，从一个表中拷贝所有的数据到另一个表中的sql是什么？原来我很少用到，也没注意过这个问题，面试后我上网查查，回来自己亲手写了写，测试了下，确实有的。现在我记录下。这个语句是:insert into A select * from B;这个语句根据需要变化，字段一定要一致；另一种是MySQL复制表结构及数据到新表:CREATE TABLE 新表 SELECT * FROM 旧表;例子sql语句：CREATE TABLE...

遇见的oracle数据库和mysql数据库对于一个sql语句的不同支持情况【代码】

# SQL_ASELECT*FROM t_dept t JOIN t_emp e JOIN t_salary s ON t.id=e.`deptId` AND e.`id` = s.`eid`比如上面这个sql，这种 JOIN JOIN ON AND的语法在oracle中是不被支持的，它支持的是JOIN ON JOIN ON的语法，正确写法如下# SQL_BSELECT*FROM t_dept t JOIN t_emp e ON t.id=e.`deptId` JOIN t_salary s ON e.`id` = s.`eid`但是在Mysql中，SQL_A这样的语句是可以执行的，这种语法是被支持的，而且SQL_A和SQL_B语句在mysql中执...

MysQL第二课 sql语句生成数据库

场景mysql 可执行程序目录：C:\Program Files (x86)\MySQL\MySQL Server 5.6\bin登录指令mysql.exe -u root -p输入密码：admin123show databases;//s是必须，;是必须，显示所有的数据库导入数据表的时候，必须选择一个数据库，否则出现错误提示:No database selected，使用指令use test;注意：创建数据库指令: create database test;导入数据库指令:source E:test.sql解惑mysql-js> 这个提示说明当前的交互语言是Javascript参考ht...

MySQL sql语句执行顺序

sql语句select语句查询顺序(7) SELECT (8) DISTINCT <select_list> (1) FROM <left_table> (3) <join_type> JOIN <right_table> (2) ON <join_condition> (4) WHERE <where_condition> (5) GROUP BY <group_by_list> (6) HAVING <having_condition> (9) ORDER BY <order_by_condition> (10) LIMIT <limit_number> 一、执行FROM语句，mysql是从左往右执行，oracle是从右往左执行...

mysql优化--explain分析sql语句执行效率

Explain命令在解决数据库性能上是第一推荐使用命令，大部分的性能问题可以通过此命令来简单的解决，Explain可以用来查看SQL语句的执行效果，可以帮助选择更好的索引和优化查询语句，写出更好的优化语句。Explain语法：explain select … from … [where …]例如：explain select * from news;输出：+----+-------------+-------+-------+-------------------+---------+---------+-------+------| id | select_type | table | typ...

Oracle 和 mysql 的批量操作Sql语句的区别

正确的oracle批量新增的sql是：方法 1：<insert id="insertAttractionsBatch" parameterType="java.util.List">insert into ATTRACTIONS (ID, NAME, LONGITUDE, LATITUDE, UPDATE_TIME) <foreach collection="list" item="item" index="index" separator="union all" > (select #{item.id,jdbcType=VARCHAR}, #{item.name,jdbcType=VARCHAR}, #{item.longitude,jdbcType=DECIMAL}, #{item.updateTime,jdbcType=TIMESTAMP}...

使用SQL语句操作MYSQL字符编码

-- 查看所有的字符编码SHOW CHARACTER SET;-- 查看创建数据库的指令并查看数据库使用的编码 show create database dbtest;-- 查看数据库编码：show variables like ‘%char%‘;-- 设置character_set_server、set character_set_client和set character_set_results set character_set_server = utf8; -- 服务器的默认字符集。使用这个语句可以修改成功，但重启服务后会失效。根本的办法是修改配置MYSQL文件MY.INI，ch...

MySQL开启记录执行过的SQL语句方法

概述很多时候，我们需要知道 MySQL 执行过哪些 SQL 语句，比如 MySQL 被注入后，需要知道造成什么伤害等等。只要有 SQL 语句的记录，就能知道情况并作出对策。服务器是可以开启 MySQL 的 SQL 语句记录功能，从而就能间接地检测到客户端程序的行为。方法开启方法很简单：编辑/etc/my.cnf文件，在[mysqld]节下面添加：log=/var/lib/mysql/sql_row.log行（日志的路径自己根据需要定义）。复制代码代码如下: [mysqld] datadir=/var/l...

mysql语句大全

1、说明：创建数据库CREATE DATABASE database-name2、说明：删除数据库drop database dbname3、说明：备份sql server--- 创建备份数据的 deviceUSE masterEXEC sp_addumpdevice ‘disk‘, ‘testBack‘, ‘c:\mssql7backup\MyNwind_1.dat‘--- 开始备份BACKUP DATABASE pubs TO testBack4、说明：创建新表create table tabname(col1 type1 [not null] [primary key],col2 type2 [not null],..)根据已有的表创建新表：A：create ...

用一条mysql语句插入多条数据【代码】

假如有一个数据表A:id name title addtime 如果需要插入n条数据 : $time= time(); $data = array(array(‘name‘=>‘name1‘,‘title‘=>‘title1‘,‘addtime‘=>$time;),array(‘name‘=>‘name2‘,‘title‘=>‘title2‘,‘addtime‘=>$time;),array(‘name‘=>‘name3‘,‘title‘=>‘title3‘,‘addtime‘=>$time;),...array(‘name‘=>‘nameN‘,‘title‘=>‘titleN‘,‘addtime‘=>$time;),); 之前我的想法会是，...

mysql语句进阶【图】

1.nullmysql> create table worker(id int not null,name varchar(8) not null,pass varchar(20) not null);mysql> insert into worker values(1,‘HA‘,‘123456‘);mysql> insert into worker values(1,‘LB‘,null);ERROR 1048 (23000): Column ‘pass‘ cannot be null 不能为nullmysql> insert into worker values(2,‘HPC‘,‘‘);mysql中的NULL是占用空间的。是一个数值。 null 和‘‘是不同的。2.default 设定字段的默认值...

mysql基本sql语句大全(提升用语篇)

1、说明：复制表(只复制结构,源表名：a 新表名：b) (Access可用) 　　法一：select * into b from a where 1<>1(仅用于SQlServer) 　　法二：select top 0 * into b from a 　　2、说明：拷贝表(拷贝数据,源表名：a 目标表名：b) (Access可用) 　　insert into b(a, b, c) select d,e,f from b; 　　3、说明：跨数据库之间表的拷贝(具体数据使用绝对路径) (Access可用) 　　insert into b(a, b, c) select d,e,f from b in ‘具体数...

MYSQL - 技术教程分类

MySQL 教程 MySQL 安装 MySQL 管理 MySQL PHP 语法 MySQL 连接 MySQL 创建数据库 MySQL 删除数据库 MySQL 选择数据库 MySQL 数据类型 MySQL 创建数据表 MySQL 删除数据表 MySQL 插入数据 MySQL 查询数据 MySQL WHERE 子句 MySQL UPDATE 更新 MySQL DELETE 语句 MySQL LIKE 子句 MySQL UNION MySQL 排序 MySQL 分组 MySQL 连接的使用 MySQL NULL 值处理 MySQL 事务 MySQL ALTER命令 MySQL 索引 MySQL 临时表 MySQL 复制表 MySQL 元数据 MySQL 序列使用 MySQL 处理重复数据 MySQL 及 SQL 注入 MySQL 导出数据 MySQL 导入数据 MySQL 函数 MySQL 运算符 mysql 全部

MYSQL - 最热教程

sql分组取最大记录方法 mysql如何设置默认值 mysql创建数据表时指定默认值教程 MySQL 5.7 的初始化操作（root初始密码...Oracle中合并数据集(多行变一行)mysql 相同内容的字段合并为一条的方法解决mysql设置时区时的错误Unknown or ...解决ubuntu下mysql的'Access denied fo...ubuntu系统中MysqlERROR1045(28000)报错...mysql数据库设置不区分大小写

首页 / MYSQL / 腾讯云数据库团队：MySQL语句复制（SBR）的缺陷列举

腾讯云数据库团队：MySQL语句复制（SBR）的缺陷列举

内容导读

内容图文

相关推荐

MySQL AHI 实现解析

腾讯云TDSQL数据库系统架构介绍

内容总结

内容备注

内容手机端

【腾讯云数据库团队：MySQL语句复制（SBR）的缺陷列举】教程文章相关的互联网学习教程文章

MySQL(语句)【代码】

如何查找MySQL中查询慢的SQL语句【图】

MySql命令行命令和SQL语句

mysql从一个表中拷贝数据到另一个表中sql语句

遇见的oracle数据库和mysql数据库对于一个sql语句的不同支持情况【代码】

MysQL第二课 sql语句生成数据库

MySQL sql语句执行顺序

mysql优化--explain分析sql语句执行效率

Oracle 和 mysql 的批量操作Sql语句的区别

使用SQL语句操作MYSQL字符编码

MySQL开启记录执行过的SQL语句方法

mysql语句大全

用一条mysql语句插入多条数据【代码】

mysql语句进阶【图】

mysql基本sql语句大全(提升用语篇)

MYSQL - 相关标签

数据库 - 相关标签

MYSQL - 技术教程分类

MYSQL - 最新教程

MYSQL - 最热教程