首页 / MYSQL / Mysql5.7基于GTID的半同步复制

Mysql5.7基于GTID的半同步复制

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Mysql5.7基于GTID的半同步复制，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含7589字，纯文字阅读大概需要11分钟。

内容图文

一、GTID是什么

GTID是事务的ID，唯一识别号，全局唯一。
随事务记录到Binary Log中，用来标识事务。
每个事务有一个Gtid_log_event。
GTID的构成：UUID + Sequence Number

Sequence Number是MySQL服务器内部的一个事务顺序号。一个MySQL服务器上的事务不会有重复的顺序号(保证服务器内唯一)。
每个MySQL服务器有一个全局唯一的UUID。

GTID的目的
简化复制的使用过程和降低复制集群维护的难度，不再依赖Master的binlog文件名和文件中的位置。
常规：CHANGE MASTER TO MASTER_LOG_FILE=‘Master-bin.000008’, MASTER_LOG_POS=‘216’;
使用GTID：CHANGE MASTER TO AUTO_POSITION=1;

AUTO_POSITION的原理
MySQL Server 记录了所有已经执行了的事务的GTID，包括复制过来的（可用过系统变量Gtid_executed查看）。
Slave记录了所有从master接收过来的事务的GTID（可通过Retrieve_gtid_set查看）。
Slave连接到Master时，会把gtid_executed中的gtid发给master，Master会自动跳过这些事务，只将没有复制的事物发送到Slave去。

GTID不支持的语句/事务
1.CREATE TABLE … SELECT

2.事务中同时使用了支持事务和不支持事务的引擎。
BEGIN；
INSERT INTO innodb_tbl(…);
INSERT INTO myisam_tbl(…);
COMMIT;

3.在事务中使用CREATE/DROP TEMPORARY TABLE
BEGIN；
INSERT INTO innodb_tbl(…);
CREATE　TEMPORARY TABLE temp1;
．．．
COMMIT;

注意：启用GTID前，请检测业务系统中是否有GTID不支持的语句/事务，提前处理。

启用GTID

SET @@GLOBAL.GTID_MODE = OFF_PERMISSIVE; (在每一个服务器上设置)
SET @@GLOBAL.GTID_MODE = ON_PERMISSIVE; (在每一个服务器上设置)
SET @@GLOBAL.GTID_MODE = ON; (在每一个服务器上设置)

二、无数据丢失的半同步复制

从MySQL5.5开始，MySQL以插件的形式支持半同步复制。如何理解半同步呢？首先我们来看看异步，全同步的概念。

异步复制（Asynchronous replication）

MySQL默认的复制即是异步的，主库在执行完客户端提交的事务后会立即返回给客户端，并不关心从库是否已经接收并处理，这样就会有一个问题，主库如果crash掉了，此时主库上已经提交的事务可能并没有传到从上，如果此时，强行将从提升为主，可能导致新主库上的数据不完整。

全同步复制（Fully synchronous replication）
指当主库执行一个事务，等所有的从库都执行了该事务才返回给客户端。因为需要等待所有从库执行完该事务才能commit，所以全同步复制的性能必然会收到严重的影响。

半同步复制（Semisynchronous replication）
介于异步复制和全同步复制之间，主库在执行完客户端提交的事务后不是立刻返回给客户端，而是等待至少一个从库接收到并写到relay log中才返回给客户端。相对于异步复制，半同步复制提高了数据的安全性，同时它也造成了一定程度的延迟，这个延迟最少是一个TCP/IP往返的时间。所以，半同步复制最好在低延时的网络中使用。

半同步复制的潜在问题

客户端事务在存储引擎层提交后，在得到从库确认的过程中，主库宕机了，此时，可能的情况有两种：

1.事务还没发送到从库上

此时，客户端会收到事务提交失败的信息，客户端会重新提交该事务到新的主上，当宕机的主库重新启动后，以从库的身份重新加入到该主从结构中，会发现，该事务在从库中被提交了两次，一次是之前作为主的时候，一次是被新主同步过来的。

2.事务已经发送到从库上

此时，从库已经收到并应用了该事务，但是客户端仍然会收到事务提交失败的信息，重新提交该事务到新的主上。

无数据丢失的半同步复制

针对上述潜在问题，MySQL 5.7引入了一种新的半同步方案：Loss-Less半同步复制。

当然，之前的半同步方案同样支持，MySQL 5.7引入了一个新的参数进行控制-rpl_semi_sync_master_wait_point

rpl_semi_sync_master_wait_point有两种取值：

AFTER_SYNC：这个即新的半同步方案，Waiting Slave dump在Storage Commit之前。
AFTER_COMMIT：老的半同步方案

三、无数据丢失的半同步复制的部署

--安装前提
1、MySQL5.5 版本或更高
2、主、从库的 have_dynamic_loading 系统变量值为 yes
3、主、从异步复制已部署

在主库安装 rpl_semi_sync_master 插件

mysql> INSTALL PLUGIN rpl_semi_sync_master SONAME ‘semisync_master.so‘;
Query OK, 0 rows affected (0.12 sec)

查看插件是否加载成功
有两种方式
1.
mysql> show plugins;

mysql> SELECT PLUGIN_NAME, PLUGIN_STATUS FROM INFORMATION_SCHEMA.PLUGINS WHERE PLUGIN_NAME LIKE ‘%semi%‘;

主库增加以下配置：

[mysqld]
#For GTID Replication
server_id=18
gtid_mode=on
enforce_gtid_consistency=on
#For Semi Sync config
rpl_semi_sync_master_enabled=1
rpl_semi_sync_master_timeout=3000 # 3 second
#For binlog
log_bin=master-binlog
binlog_format=row
log_slave_updates=1

在从库安装 rpl_semi_sync_slave 插件

从库增加以下配置：

[mysqld]
#For GTID Replication
server_id=19
gtid_mode=on
enforce_gtid_consistency=on
#For binlog
log_bin=master-binlog
binlog_format=row
log_slave_updates=1
#For as slave. Please mark it if switch to master.
read_only=1
skip_slave_start=1
relay_log_recovery=1
##For Semi Sync config
rpl_semi_sync_slave_enabled=1

启动半同步复制

在安装完插件后，半同步复制默认是关闭的，上面已经将半同步的参数配置好了，可以重启mysql即可，也可以不重启mysql，手动设置参数来使之生效：
主：
mysql> SET GLOBAL rpl_semi_sync_master_enabled = 1;

从：
mysql> SET GLOBAL rpl_semi_sync_slave_enabled = 1;

重启Slave上的IO线程
mysql> STOP SLAVE IO_THREAD;
mysql> START SLAVE IO_THREAD;

如果没有重启，则默认还是异步复制，重启后，slave会在master上注册为半同步复制的slave角色。

在master上的error.log中会有以下信息：

2017-02-07T07:42:06.941095Z 21 [Note] Start binlog_dump to master_thread_id(21) slave_server(19), pos(, 4)
2017-02-07T07:42:06.941124Z 21 [Note] Start semi-sync binlog_dump to slave (server_id: 19), pos(, 4)

这两个变量常用来监控主从是否运行在半同步复制模式下。

当半同步复制发生超时时（由rpl_semi_sync_master_timeout参数控制，单位是毫秒，默认为10000，即10s），会暂时关闭半同步复制，转而使用异步复制。当master dump线程发送完一个事务的所有事件之后，如果在rpl_semi_sync_master_timeout内，收到了从库的响应，则主从又重新恢复为半同步复制。

查看半同步复制的状态

mysql> show status like ‘%Rpl_semi%‘;

本文出自 “June我行” 博客，请务必保留此出处http://junewx.blog.51cto.com/12554494/1895712

Mysql5.7基于GTID的半同步复制

标签：mysql gtid 半同步复制

本文系统来源：http://junewx.blog.51cto.com/12554494/1895712

内容总结

以上是互联网集市为您收集整理的Mysql5.7基于GTID的半同步复制全部内容，希望文章能够帮你解决Mysql5.7基于GTID的半同步复制所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/474598.html

来源：【匿名】

【上一篇】mysql复制(高可用架构方案的基础)【下一篇】用IE远程创建Mysql数据库的简易程序

更多 ►

【Mysql5.7基于GTID的半同步复制】教程文章相关的互联网学习教程文章

安装mysql5.7脚本

#!/bin/bash#====================================================# Author: will# Create Date: 2020-02-13# Description:just for mysql-5.7.28#====================================================yum install -y wget c ncurses-develyum install -y gcc pcre pcre-devel openssl openssl-devel make cmakeyum install -y libaio bison gcc-c++ git ncurses gd curl curl-devel libjpeg libjpeg-devel libpng libpng-deve...

docker 安装 mysql5.7【代码】

sudo docker run -d -p 3306:3306 --restart always --privileged=true -v /hytd/mysql/conf:/etc/mysql/conf.d -v /hytd/mysql/logs:/logs -v /hytd/mysql/data:/var/lib/mysql -e MYSQL_ROOT_PASSWORD=‘hytd@2021@)2!‘ --name mysql mysql:5.7 原文：https://www.cnblogs.com/xiaojf/p/14626328.html

MySQL5.7 my.cnf常用参数、调优参数及常用语句

首次登陆修改root密码mysql>use mysql;mysql>ALTER USER ‘root‘@‘localhost‘ IDENTIFIED BY ‘123456‘; 更改用户密码mysql>update user set authentication_string=password(‘new password‘) where user=‘root‘;mysql>flush privileges; ###刷新权限表编辑/etc/my.cnf[mysqld]datadir=/var/lib/mysql ###数据库存储路径socket=/var/lib/mysql/mysql.sock ###mysql.sock文件存储路径...

zabbix系列zabbix3.4监控mysql5.7【代码】【图】

本来想用python脚本监控一下mysql的，没有找到相关资料，懒得折腾了，使用官方自带的监控模板进行监控mysql 添加zabbix-agent配置文件把默认的userparameter_mysql.conf 文件进行替换为一下内容[root@test-mq01 zabbix_agentd.d]# cat userparameter_mysql.conf #UserParameter=mysql.status[*],echo "show global status where Variable_name=‘$1‘;" | HOME=/var/lib/zabbix mysql -N | awk ‘{print $$2}‘ UserParameter=mysq...

关闭掉mysql 8和mysql5.7的密码验证插件validate_password【图】

在mysql文档中的一段话If you installed MySQL 5.7 using the MySQL Yum repository, MySQL SLES Repository, or RPM packages provided by Oracle, validate_password is enabled by default after you start your MySQL Server for the first time. 如果您使用MySQL Yum存储库、MySQL SLES存储库或Oracle提供的RPM包安装了MySQL 5.7，那么在第一次启动MySQL服务器后，validate_password默认是启用的。当前我操作的环境是mysql 8，...

mysql5.7和mysql5.6默认的sql_mode说明【代码】

一.场景：最近在部署新的项目，开发要求把原先旧项目的MySQL数据导入到新项目MySQL5.7的数据库上。（旧项目上运行的是mysql5.6）不就是导入数据嘛，也没多想，那就导入呗。导入时，开始报错了，报错如下：MySQL 5.7 ERROR 1067 (42000): Invalid default value for ‘CREATE_TIME‘MySQL 5.7 ERROR 1067 (42000): Invalid default value for ‘day‘简单google了下，发现原来是mysql5.6和mysql5.7默认的sql_mode模式参数是不一样...

Windows下Mysql5.7忘记root密码的解决方法【代码】

找到mysql5.7安装的目录，我这里是：C:\Program Files\MySQL\MySQL Server 5.7先停止mysql服务在服务里找到MySQL57服务，停掉它。修改my.ini用管理员权限启动cmd命令窗口，很重要！进入bin目录，拷贝my-default.ini 成my.ini，把my.ini里的datadir的值改成你的mysql数据库目录的值，我这里是：datadir=C:/ProgramData/MySQL/MySQL Server 5.7/Data然后在cmd窗口执行命令:mysqld --skip-grant-tables回车后窗口就堵塞了，不会继续往...

phpstury 升级mysql5.7【代码】【图】

今天在往本地导数据表的时候老是报错：[Err] 1294 - Invalid ON UPDATE clause for ‘字段名‘ column报错的数据表字段：`字段名` datetime DEFAULT NULL ON UPDATE CURRENT_TIMESTAMP同事说同一个 sql 文件他可以导成功。猜可能是数据库版本的问题，同事的是 5.6，我查了下本地的数据库版本是 5.5.53。网上查了一下，果然是版本的问题，5.5 和 5.6 在 TIMESTEMP 的行为上有所不同，5.6.5 之前的版本不支持多个CURRENT_TIMESTAMP 默...

Docker安装并配置MySQL5.7【代码】【图】

一. 版本　　CentOS：7.6　　Docker：19.03　　MySQL：5.7 二. 下载并安装　　1. 拉取MySQL镜像：　　　　 docker pull mysql:5.7 　　2. 创建MySQL在宿主机对应的目录映射：　　　　 mkdir -p /usr/local/mysql/{logs,data} 　　3. 安装MySQL：// 切换到宿主机的mysql目录 cd /usr/local/mysql // 创建mysql容器 docker run -p 3306:3306 --name my_mysql -v $PWD/logs:/var/log/mysql -v $PWD/data:/var/lib/mysql --restart=alw...

CentOS7下安装mysql5.7【代码】【图】

一、安装YUM Repo1、由于CentOS 的yum源中没有mysql，需要到mysql的官网下载yum repo配置文件。下载命令：yum -y install wgetwget https://dev.mysql.com/get/mysql57-community-release-el7-9.noarch.rpm2、然后进行repo的安装：rpm -ivh mysql57-community-release-el7-9.noarch.rpm执行完成后在/etc/yum.repos.d/目录下生成两个.repo文件：二、使用yum命令即可完成安装注意：必须进入到/etc/yum.repos.d/目录下再执行以下脚本1...

LinuxCentOS7安装mysql5.7【图】

1、由于在线安装受制于网络环境，所以选择tar包编译安装。首先去mysql镜像站下载mysql-5.7.17-linux-glibc2.5-x86_64.tar.gz2、上传到centos3、检查你所用的Linux下有没有安装过mysql，没有卸载干净rpm -qa|grep -i mysqlrpm -q libaio 如果存在，则需要先卸载掉，不然会出现覆盖错误。yum remove mysql mysql-server mysql-libs mysql-server; find / -name mysql 将找到的相关东西delete掉；rpm -qa|grep mysql(查询出来...

CentOS利用docker安装MySQL5.7【代码】【图】

前提条件centos7 且内核版本高于3.10, 可通过以下命令查看内核版本 uname -r 利用yum 安装docker安装一些必要的系统工具:sudo yum install -y yum-utils device-mapper-persistent-data lvm2添加软件源信息:sudo yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo更新 yum 缓存：sudo yum makecache fast安装 Docker-ce：sudo yum -y install docker-ce启动 Docker 后台服务:sudo ...

mysql5.7 数据库自动备份脚本【图】

新建备份目录mkdir /backupsmkdir /backups/mysql新建存放备份脚本目录mkdir /data/scripts 备份脚本：mysql_backup.sh===============================================================#!/bin/bashHOST=localhostUSER=rootPORT=　　#端口号PASSWD= 　#数据库密码DATE=`date +%Y-%m-%d`#DATE_NOW=`date +%Y-%m-%d.%H%M`DATE_NOW=`date +%Y-%m-%d` OLDDATE=`date +%Y-%m-%d -d "60 days ago"`　　BACKUPDIR=/backups/mysql 　　#备...

centos7 + mysql5.7 修改select now(); 时间显示错误的问题

昨天开发人员提出，在使用mysql数据库时，查看到的数据库时间有问题，与本地时间不一致；一：查看问题 1.在数据库：查看时间； mysql> mysql> select now(); +---------------------+ | now() | +---------------------+ | 2017-06-15 15:10:15 | +---------------------+ 1 row in set (0.00 sec) 2.在linux服务器：查看时间： ...

mysql5.7的下载链接 mysql网站进不去找不到下载链接可以试试

https://dev.mysql.com/downloads/mysql/5.7.html#downloads 压缩包版https://dev.mysql.com/downloads/installer/ 安装版 (一般都是这个)原文：https://www.cnblogs.com/stan-an/p/12574528.html

首页 / MYSQL / Mysql5.7基于GTID的半同步复制

Mysql5.7基于GTID的半同步复制

内容导读

内容图文

内容总结

内容备注

内容手机端

【Mysql5.7基于GTID的半同步复制】教程文章相关的互联网学习教程文章

同步 - 相关标签

MYSQL - 技术教程分类

MYSQL - 最新教程

MYSQL - 最热教程