binlog是二进制日志文件，用于记录mysql的数据变更，数据在恢复的时候binlog日志能起到很大的作用。mysql的主从复制就是利用的binlog原理 1、登录mysql之后使用下面的命令查看是否开启binlog show variables like log_%;2、编辑配置文件 vi /etc/my.cnf3、加入以下内容server_id=2log_bin = mysql-binbinlog_format = ROWexpire_logs_days = 304、重启mysql服务 systemctl restart mysqld5、再次使用命令show variables like log_%...
对于数据频繁更新的数据库使用binlog会占用大量的磁盘空间。 windows下8.0以上版本的Mysql可以在*.ini文件[mysqld]下添加skip-log-bin，重启mysql服务即可。 示例：
binlog 的配置 mysql> show variables like %binlog%;+---------------------------------------------------+----------------------+| Variable_name | Value |+---------------------------------------------------+----------------------+| binlog_cache_size | 2097152 || binlog_checksum ...
（一）概述在日常MySQL数据库运维过程中，可能会遇到用户误删除数据，常见的误删除数据操作有：用户执行delete，因为条件不对，删除了不应该删除的数据(DML操作)；用户执行update，因为条件不对，更新数据出错（DML操作）；用户误删除表drop table（DDL操作）；用户误清空表truncate(DDL操作)；用户删除数据库drop database，跑路（DDL操作）…等这些情况虽然不会经常遇到，但是遇到了，我们需要有能力将其恢复，下面讲述如何恢复。...
MHA的理论知识网上有很多教程，这里不会说明；仅推荐博客链接！MHA的理论说明：http://www.ywnds.com/?p=8094MHA的安装包需要在google上面下载，或者就是csdn上面花钱下载！详细说明怎么搭建MHA.... mgt01 slave节点#这里我们一主两从的架构基于binlog复制，首先需要配置好一主两从的架构。 #需要注意的是，作为备用主的slave服务器需要开通二进制日志和配置log_slave_updates参数 #MySQL基于binglog复制过程如...
1.确认MySQL相关配置以及用户权限使用MySQL必须设置以下参数:[mysqld]server_id = 1log_bin=mysql-bin.loglog_bin_index=mysql-bin.log.indexbinlog_format=rowmax_binlog_size=1Gbinlog_row_image = full user需要的最小权限集合：select,super/replication client,replication slave 建议授权grant select,replication client,replication slave on *.* to repl@%identified by mysql; 2.下载安装binlog2sql，并做调整requiremen...
MySQL工具之binlog2sql闪回操作工具官网： https://github.com/danfengcao/binlog2sql 本文所有依赖包链接： https://share.weiyun.com/57HUxNi ---binlog2sql工具安装过程 1、安装系统依赖包 yum -y install gcc libffi-devel automake autoconf libtool make zlib* zlib-devel openssl-devel openssl* bzip2* 2、安装Python2.7 cp /soft/Python-2.7.16.tgz /usr/src/ cd /usr/src/ tar -zxvf Python-2.7.16.tgz cd /usr/src/Pyt...
今天聊一聊关于mysql innodb存储引擎中一个事务的完整流程： 首先说下innodb的事务日志概念： ib_logfile文件就是innodb的事务日志，可以理解是INNODB的REDO日志，当数据库异常关闭的时候，innodb存储引擎下的mysql借助事务日志来完成实例恢复，即前滚和回滚来保证数据库一致性；区别于binlog日志又叫二进制日志文件，它会将mysql中所有修改数据库数据的Query以二进制的形式记录到日志文件中,如：create,insert,drop,update等;（对...
环境搭建 1、虚拟机配置请参考https://www.cnblogs.com/public-communion/p/14629113.html2、mysql 安装请参考https://www.cnblogs.com/public-communion/p/14629060.html3、git安装 查看是否安装git # git --version出现版本号，则说明已安装。如未安装，自行百度。4、pip安装 # wget https://bootstrap.pypa.io/pip/2.7/get-pip.py # python get-pip.py # pip -V如执行上述代码未安装成功，请看下面：执行第二段代码遇到截图的错...
在观看老男孩老师的教学视频时，讲到从库请求主库发送数据，但想想于理不合，如果每次都是从库请求才更新数据，那就不能实时更新，对于一些比较“安静”的数据库也是浪费资源。 经抓包实验后，发现如下，算是对老师讲解的一点补充 [root@DB-Slave ~]# tcpdump -w 1.pcap ‘host 192.168.199.211 and host 192.168.199.230‘ #192.168.199.211是主库，192.168.199.230是从库 当从库开始start slave后，主动发起tcp连接，使用一个高位...
事情由来： 一大早突然收到zabbix告警，说磁盘就剩不到15了，赶紧上去瞅瞅什么情况排查过程 1、df -ah 看看确认是/data目录占用91%了已经 2、找到具体/data下的哪个目录用的，最终定位到是mysql的binlog占用，这很明显是binlog写的太多导致的了，ps， 这里排查过程那个图忘了截了，可以用du -ah -d 1 看具体某个目录下的所有子目录的占用大小 -d 是代表层级关系，一级一级敲下来就找到哪个目录用的了 3、开始把binlog从raw改为STA...
#!/usr/bin/python # -*- coding: utf-8 -*- #python binlog_analyze.py binlog.000008 2020-03-01 00:00:00 2022-03-01 00:00:00 import os,sys binlog_name = sys.argv[1] start_datetime = sys.argv[2] stop_datetime = sys.argv[3] binlog_command = "mysqlbinlog --no-defaults -vvv --start-datetime=%s --stop-datetime=%s %s" % (start_datetime,stop_datetime,binlog_name) binlog_line=os.pop...
前言 在MySQL数据库中，binlog是非常关键的日志文件，相关参数也是非常多；其中，binlog_row_image是一个很重要但又容易被忽略的参数。binlog_row_image参数，决定了binlog是如何记录前镜像和后镜像的，这也就会直接影响到数据闪回、主从复制等。 概念 首先，我们先介绍一下前镜像和后镜像： （1）前镜像(before image)：记录修改前的内容 （2）后镜像(after image)：记录修改后的内容 binlog_row_image参数，只在row模式下生效，...
背景 随着业务的不断演进，分库分表解决了数据的存储问题，但需要做合并查询却是个很麻烦的事，尤其在微服务架构中，往往需要横跨多个服务进行数据查询。开发难度大，接口性能极速下降，由此，架构演进成为必然要求。 解决方案 数据存储由关系型数据库负责，有强事务隔离机制，保障数据不丢失、不串乱、不覆盖，实时可靠。 数据查询由 Elasticsearch 负责，分库分表的数据合并同步到 ES 索引；跨领域库表数据合并到同步 ES 索引，这...
通过innobackupex 恢复全量备校验全量备份文件 # 可用性校验$ more backup_datetime.log #应在最后有明确的MySQL binlog position及completed OK!成功提醒。 # 完整性校验$ sha256sum -cw full_backup_file.tar.gz.SHA256 #终端输出OK。恢复全量备份文件 # 解压全量备份$ tar -xf full_bakckup_file.tar.gz -C /recover_dir_tmp/data/# 恢复全量备份$ innobackupex --apply-log /recover_dir_tmp/data/#请确保data目录为空...