问题简述：一周前，有一台mysql服务器发生硬件故障，停机了。我们给专门负责这块的同学提交了申请，他们负责去报修这台服务器。今天这台服务器修好后，他们将其开机启动。服务器上的4个mysql实例在开机后自动启动，开始拉主库的binlog。由于这台服务器停机时间比较久，日志丢的比较多，狂拉主库的binlog，导致主库网络出现问题。现象：首先，我们完全没有意识到是因为一台坏掉的服务器重启拉主库binlog导致的，因为我们压根不知道 ...
前言 最近线上误操作了一个数据，由于是直接修改的数据库，所有唯一的恢复方式就在mysql的binlog。binlog使用的是ROW模式，即受影响的每条记录都会生成一个sql。同时利用了binlog2sql项目。 MySQL Binary Log也就是常说的bin-log, ,是mysql执行改动产生的二进制日志文件,其主要作用有两个: * 数据回复 * 主从数据库。用于slave端执行增删改，保持与master同步。 binlog基本配置和格式binlog基本配置binlog需要在mysql的配置文件的m...
主库binlog:# at 2420 #170809 17:16:20 server id 1882073306 end_log_pos 2451 CRC32 0x58f2db87 Xid = 32880 COMMIT/*!*/; # at 2451 #170814 11:07:18 server id 1882073306 end_log_pos 2528 CRC32 0x40774a4b Query thread_id=92 exec_time=0 error_code=0 SET TIMESTAMP=1502680038/*!*/; BEGIN /*!*/; # at 2528 # at 2560 #170814 11:07:18 server id 1882073306 end_log_pos 2560 CRC32 0x7bdf274b Intvar SET INSERT...
mysql复制主要有三种方式：基于SQL语句的复制(statement-based replication, SBR)，基于行的复制(row-based replication, RBR)，混合模式复制(mixed-based replication, MBR)。对应的，binlog的格式也有三种：STATEMENT，ROW，MIXED。① STATEMENT模式（SBR）每一条会修改数据的sql语句会记录到binlog中。优点是并不需要记录每一条sql语句和每一行的数据变化，减少了binlog日志量，节约IO，提高性能。缺点是在某些情况下会导致mast...
前言 在日常工作或者学习中，操作数据库时候难免会因为“大意”而误操作，需要快速恢复的话通过备份来恢复是不太可能的，下面这篇文章主要给大家介绍关于Mysql误操作后利用binlog2sql快速回滚的方法，话不多说，来一起看看详细的介绍： 一、总体解释：DML（data manipulation language）： 它们是SELECT、UPDATE、INSERT、DELETE，就象它的名字一样，这4条命令是用来对数据库里的数据进行操作的语言DDL（data definition lan...
一、binlog 介绍服务器的二进制日志记录着该数据库的所有增删改的操作日志(前提是要在自己的服务器上开启binlog)，还包括了这些操作的执行时间。为了显示这些二进制内容，我们可以使用mysqlbinlog命令来查看。用途1：主从同步用途2：恢复数据库（也是线上出现一次数据库文件丢失后，才对这个有所了解并学习的）mysqlbinlog命令用法：shell> mysqlbinlog [options] log_file ...<!--[if !supportLists]-->1) mysqlbinlog 选项示例常...
本文主要描述了MySQL遭到攻击篡改数据，利用从库的备份和主库的binlog进行不完全恢复。 欢迎转载，请注明作者、出处。 作者：张正 QQ：176036317 如有疑问，欢迎联系。一、发现问题 今天是2014-09-26，开发大清早就说昨晚数据库遭到了攻击。数据库中某文章表的文章内容字段遭到篡改，全部改成了同一篇文章。 通过查看日制 发现 数据是在 2014-09-25 21:53:57 遭到篡改。 所有的内容全部被改成了如下：代码如下: subject: 桂林阳朔自...
问题简述： 一周前，有一台mysql服务器发生硬件故障，停机了。我们给专门负责这块的同学提交了申请，他们负责去报修这台服务器。今天这台服务器修好后，他们将其开机启动。服务器上的4个mysql实例在开机后自动启动，开始拉主库的binlog。由于这台服务器停机时间比较久，日志丢的比较多，狂拉主库的binlog，导致主库网络出现问题。现象： 首先，我们完全没有意识到是因为一台坏掉的服务器重启拉主库binlog导致的，因为我们压根不知道...
目标，开发人员说有个数据莫名其妙添加了，但是不知道是从哪里添加的，而且应用功能里面不应该添加这样的数据，为了查清楚来源，所以我就准备去binlog里面找了，但是binlog有好几个月的数，我这样一个个mysqlbinlog下去，也不是办法，所以想到准备用脚本循环来操作。 1，去binlog目录复制所有的binlog到临时目录/tmp/bl/cp /home/data/mysql/binlog/mysql-bin.* /tmp/bl2，写脚本遍历[root@wgq_idc_dbm_3_61 tmp]# vim find_guolic...
操作命令： 代码如下:show binlog events in mysql-bin.000016 limit 10; reset master 删除所有的二进制日志flush logs 产生一个新的binlog日志文件 show master logs; 或者 show binary logs; 查看二进制文件列表和文件大小 代码如下:./mysqlbinlog --start-datetime="2012-05-21 15:30:00" --stop-datetime="2012-05-21 16:40:00" /binlog/mysql-bin.000005 > a.log 2. 要想通过日志恢复数据库，在你的 my.cnf 文件里应该有如下...
MySQL的事件调度器可以精确到每秒钟执行一个任务，对于一些对数据实时性要求比较高的应用（例如：股票、赔率、比分等）就非常适合。先查看是否启动这个功能: 代码如下:SELECT @@event_scheduler;在使用这个功能之前必须确保 event_scheduler已开启，可执行: 代码如下:SET GLOBAL event_scheduler = 1;或我们可以在配置my.cnf文件 中加上event_scheduler = 1然后来对 binlog 的删除写一个事件.设置天检查,并删除每 4 天前的 binlog ...
如果10台以内的db的话，自己手动ssh进去，clean就足以，但是上百台呢，就要写脚本了。大概思路：在 一台db跳转机上面, 写一个脚本,访问slave,远程获取正在复制的master上面的binlog位置, 然后再远程去purge master上面的binlog.1, 建立slave dbserver列表 slavelist; 一个slave一行。 2，远程获取slave db上面的binlog位置以及slave的master主机名（也许是ip地址） 3，拿到binlog位置以及master主机名，然后ssh远程清理掉master上面...
前言 binlog 就是binary log，二进制日志文件，这个文件记录了mysql所有的增、删、改语句。通过binlog日志我们可以做数据恢复，做主从复制等等。可以看到，只要有了这个binlog，我们就拥有了mysql的完整备份了。 我们时常会碰到这样的需求，就是要监听某个表的变化，然后来做一些操作。 如果该表数据只增加、不删除修改的话，要监听比较简单，可以定时去查询最新的id即可。但要有删除、修改操作的话，免不了就得全表扫描，效率极低...
前言我们经常需要根据用户对自己数据的一些操作来做一些事情.比如如果用户删除了自己的账号,我们就给他发短信骂他,去发短信求他回来.类似于这种功能,当然可以在业务逻辑层实现,在收到用户的删除请求之后执行这一操作,但是数据库的binlog为我们提供了另外一种操作方法.要监听binlog,需要两步,第一步当然是你的mysql需要开启这一个功能,第二个是要写程序来对日志进行读取.mysql开启binlog.首先mysql的binlog日常是不打开的,因此我们需...
Mysql的Bin log数据恢复:不小心删除数据库 前言：因为不小心删除了测试机器上Mysql的一整个数据库Schema，因为是测试机所以没有做备份，现在通过MySQL的Bin log方式恢复到删除以前的数据库。 当然做Bin log的数据恢复前提是已经打开Bin log的功能，如果又没做数据备份，又没打开Bin log日志，那你就可能需要考虑快照等其它方式从系统的角度去恢复。 Bin log 常用于数据增量备份和恢复，以及数据库主从复制。如果没有开启，可以通过...