首页 / 日志 / Mariadb学习笔记-日志及备份

Mariadb学习笔记-日志及备份

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Mariadb学习笔记-日志及备份，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含7570字，纯文字阅读大概需要11分钟。

内容图文

xtrabackup: 由percona提供，开源工具，支持对InnoDB做热备，物理备份工具；

完全备份、部分备份；
完全备份、增量备份；
完全备份、差异备份；

备份策略

完全+差异+binlog
完全+增量+binlog

mysqldump:

逻辑备份、完全备份、部分备份；
二次封装工具：mydumper、phpMyAdmin
用法：

mysqldump [options] [db_name [tbl_name ...]] 备份表
mysqldump [options] --databases [options] DB1 [DB22 DB3...]备份库及表
mysqldump [options] --all-databases [options]

MyISAM存储引擎：支持温备，备份时需要锁定所有表；

-x,--lock-all-tables:锁定所有库的所有表；
-l,--lock-tables:锁定指定库的所有表； *InnoDB存储引擎：支持温备和热备 --single-transaction:创建一个事务，基于此快照执行备份

其他选项：

-R,--routines:存储过程和存储函数；
--triggers :触发器
-E,--events：事件调度器 --flush-logs:锁定表完成后，即进行日志刷新操作；
--master-date[=#]

1:记录为CHANGE MASTER TO语句，此语句不被注释；2:记录为CHANGE MASTER TO语句，此语句被注释；

mysqldump备份还原数据库操作

备份数据库InnoDB

将备份的数据保存至文件内，备份实际上创建新的数据库，删除所有表，创建表在插入数据；
有databases时对数据库及表进行备份；
无databases时仅对表进行备份

[root@localhost ~]# mysqldump --databases hellodb --single-transaction -R --triggers -E --master-data=2 --flush-logs > /tmp/hellodb-$(date +%F)

删除数据库

MariaDB [(none)]> drop database hellodb;

需要备份二进制日志：
mysqlbinlog --stop-position=xxx /var/lib/mysql/master-log.00000x > /tmp/bin.log

恢复数据库

关闭二进制日志 set @@session.sql_log_bin=OFF
source /tmp/hello-date
source /tmp/bin.log
开启二进制日志 set @@session.sql_log_bin=ON

注意： 1、脚本化、周期性进行 2、备份结果要另存，建议为异地存储；对备份结果做测试； 3、配置mysqldump使用binlog做增量备份

基于lvm2的备份

物理备份工具，几乎热备，取决于快照命令执行的时长
前提：数据目录位于逻辑卷，包含了数据文件和事务日志；

(1)请求锁定所有表；

mysql>FLUSH TABLES WITH READ LOCK;

(2)记录二进制文件事件位置；

mysql>FLUSH LOGS;
mysql>SHOW MASTER STATUS;
#msyql -e ‘show master status;‘ >> /path/to/some_posfile

(3)创建快照卷

lvcreate -L # -s -p r - SNAM-NAME /dev/VG-NAME/LV-NAME

(4)释放锁

mysql> UNLOCK TABLES;

(5)挂载快照卷，并执行备份，备份完成后删除快照卷；
(6)周期性备份二进制日志

基于Xtrabackup的备份

Xtrabackup是由percona提供的mysql数据库备份工具，据官方介绍，这也是世界上惟一一款开源的能够对innodb和xtradb数据库进行热备的工具。特点：

(1)备份过程快速、可靠；
(2)备份过程不会打断正在执行的事务；
(3)能够基于压缩等功能节约磁盘空间和流量；
(4)自动实现备份检验；
(5)还原速度快；

支持InnoDB,XtraDB（mariadb）；
还原之前合并备份文件至一个完全备份文件；
MyISAM:温备，不支持增量备份；
InnoDB:热备，增量备份，物理备份；

物理备份：速率快、可靠；备份完成后自动效验备份结果集是否可用；还原速度快；

完全备份数据库

[root@localhost ~]# innobackupex --user=root --host=localhost /data/backup

主要生成以下文件

使用innobakupex备份时，其会调用xtrabackup备份所有的InnoDB表，复制所有关于表结构定义的相关文件(.frm)、以及MyISAM、MERGE、
CSV和ARCHIVE表的相关文件，同时还会备份触发器和数据库配置信息相关的文件。这些文件会被保存至一个以时间命名的目录中。

*在备份的同时，innobackupex还会在备份目录中创建如下文件：

(1)xtrabackup_checkpoints —— 备份类型（如完全或增量）、备份状态（如是否已经为prepared状态）和LSN(日志序列号)范围信息；
每个InnoDB页(通常为16k大小)都会包含一个日志序列号，即LSN。LSN是整个数据库系统的系统版本号，每个页面相关的LSN能够表明此页面最近是如何发生改变的。
(2)xtrabackup_binlog_info —— mysql服务器当前正在使用的二进制日志文件及至备份这一刻为止二进制日志事件的位置。
(3)xtrabackup_binlog_pos_innodb —— 二进制日志文件及用于InnoDB或XtraDB表的二进制日志文件的当前position。
(4)xtrabackup_binary —— 备份中用到的xtrabackup的可执行文件；
(5)backup-my.cnf —— 备份命令用到的配置选项信息
在使用innobackupex进行备份时，还可以使用--no-timestamp选项来阻止命令自动创建一个以时间命名的目录；如此一来，innobackupex命令将会创建一个BACKUP-DIR目录来存储备份数据
[root@localhost ~]# cd /data/backup/2017-02-21_12-26-09/[root@localhost 2017-02-21_12-26-09]# lltotal 18460-rw-r----- 1 root root      385 Feb 21 12:26 backup-my.cnf   
drwx------ 2 root root      138 Feb 21 12:26 hellodb
-rw-r----- 1 root root 18874368 Feb 21 12:26 ibdata1
drwx------ 2 root root     4096 Feb 21 12:26 mysql
drwx------ 2 root root     4096 Feb 21 12:26 performance_schema
drwx------ 2 root root       19 Feb 21 12:26 test
-rw-r----- 1 root root       23 Feb 21 12:26 xtrabackup_binlog_info  二进制备份日志
-rw-r----- 1 root root      113 Feb 21 12:26 xtrabackup_checkpoints  检查点文件
-rw-r----- 1 root root      480 Feb 21 12:26 xtrabackup_info
-rw-r----- 1 root root     2560 Feb 21 12:26 xtrabackup_logfile  事务日志信息
[root@localhost 2017-02-21_12-26-09]#

基于xtrabackup恢复数据

注意innodb_log_file_size = 50331648

准备恢复

一般情况下，在备份完成后，数据尚且不能用于恢复操作，因为备份的数据中可能会包含尚未提交的事务或已经提交但尚未同步至数据文件中的事务。
因此，此时数据文件仍处理不一致状态。“准备”的主要作用正是通过回滚未提交的事务及同步已经提交的事务至数据文件也使得数据文件处于一致性状态。

[root@localhost mysql]# innobackupex --apply-log  /data/backup/2017-01-19_10-40-32/

在实现“准备”的过程中，innobackupex通常还可以使用--use-memory选项来指定其可以使用的内存的大小，默认通常为100M。如果有足够的内存可用，可以多划分一些内存给prepare的过程，以提高其完成速度。

恢复数据

innobackupex命令的--copy-back选项用于执行恢复操作，其通过复制所有数据相关的文件至mysql服务器DATADIR目录中来执行恢复过程。
innobackupex通过backup-my.cnf来获取DATADIR目录的相关信息。

[root@localhost mysql]# innobackupex --copy-back /data/backup/2017-01-19_10-40-32/

将mysql的文件属主和属组均改成mysql

当数据恢复至DATADIR目录以后，还需要确保所有数据文件的属主和属组均为正确的用户，如mysql，否则，在启动mysqld之前还需要事先修改数据文件的属主和属组。如：

[root@localhost mysql]# chown -R mysql.mysql ./*

启动mariadb服务

[root@localhost mysql]# systemctl start mariadb

注意：恢复数据时需清空/var/lib/mysql/并需要关闭mariadb服务

基于xtrabackup的增量备份

每个InnoDB的页面都会包含一个LSN信息，每当相关的数据发生改变，相关的页面的LSN就会自动增长。这正是InnoDB表可以进行增量备份的基础，即innobackupex通过备份上次完全备份之后发生改变的页面来实现。

其中，BASEDIR指的是完全备份所在的目录，此命令执行结束后，innobackupex命令会在/backup目录中创建一个新的以时间命名的目录以存放所有的增量备份数据。另外，在执行过增量备份之后再一次进行增量备份时，其--incremental-basedir应该指向上一次的增量备份所在的目录。

#innobackupex --incremental /backup --incremental-basedir=BASEDIR

其中，BASEDIR指的是完全备份所在的目录，此命令执行结束后，innobackupex命令会在/backup目录中创建一个新的以时间命名的目录以存放所有的增量备份数据。
另外，在执行过增量备份之后再一次进行增量备份时，其--incremental-basedir应该指向上一次的增量备份所在的目录。

注意：增量备份仅能应用于InnoDB或XtraDB表，对于MyISAM表而言，执行增量备份时其实进行的是完全备份。

“准备”(prepare)增量备份与整理完全备份有着一些不同，尤其要注意的是：

(1)需要在每个备份(包括完全和各个增量备份)上，将已经提交的事务进行“重放”。“重放”之后，所有的备份数据将合并到完全备份上。 (2)基于所有的备份将未提交的事务进行“回滚”。

于是，操作就变成了：

# innobackupex --apply-log --redo-only BASE-DIR

接着执行：

# innobackupex --apply-log --redo-only BASE-DIR --incremental-dir=INCREMENTAL-DIR-1

而后是第二个增量：

# innobackupex --apply-log --redo-only BASE-DIR --incremental-dir=INCREMENTAL-DIR-2

其中BASE-DIR指的是完全备份所在的目录，而INCREMENTAL-DIR-1指的是第一次增量备份的目录，INCREMENTAL-DIR-2指的是第二次增量备份的目录，其它依次类推，即如果有多次增量备份，每一次都要执行如上操作；

本文出自 “guo_ruilin” 博客，请务必保留此出处http://guoruilin198.blog.51cto.com/12567311/1900339

Mariadb学习笔记-日志及备份

标签：mariadb magedu

本文系统来源：http://guoruilin198.blog.51cto.com/12567311/1900339

内容总结

以上是互联网集市为您收集整理的Mariadb学习笔记-日志及备份全部内容，希望文章能够帮你解决Mariadb学习笔记-日志及备份所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/475326.html

来源：【匿名】

【上一篇】Yii2 将日志记录到数据库中【下一篇】php错误日志怎么看

更多 ►

【Mariadb学习笔记-日志及备份】教程文章相关的互联网学习教程文章

rsyslog日志管理（mariadb+loganalyzer）【代码】【图】

这里演示的只是简单的本地LAMP结构，mysql用来存储由rsyslog服务发来的日志，php用来运行loganalyzer程序。loganalyzer是一个php应用，用来展示mysql中存储的日志。loganalyzer下载地址：http://download.adiscon.com/loganalyzer/loganalyzer-4.1.3.tar.gz目录：1、安装LAMP。3、mysql给rsyslog授权存储日志。注意：时间同步。loganalyzer所在系统：centos 7.11、安装LAMP：[root@localhost ~]# yum install httpd php php-mysql ...

MySQL/MariaDB的日志【代码】【图】

在Mysql/MariaDB的日志大致分为下列几种：查询日志一般查询日志：慢查询日志：错误日志二进制日志中继日志事务日志简要介绍一下这几种日志，日志对我们分析MySQL服务有着很重要的帮助；查询日志：一般查询日志：默认关闭，因为会记录所有的查询语句；MariaDB [(none)]> select @@general_log; +---------------+ | @@general_log | +---------------+ | 0 | +-------------...

41 mariadb日志文件、备份和恢复基础

01mariadb日志文件CentOS 7编译安装Mariadb[root@centos7 ~]# yum -y groupinstall "Development Tools"[root@centos7 ~]# yum install ncurses-devel openssl-devel libevent-devel jemalloc-devel cmake -y[root@centos7 ~]# tar xf mariadb-5.5.53.tar.gz [root@centos7 ~]# cd mariadb-5.5.53/[root@centos7 mariadb-5.5.53]# cmake . -DCMAKE_INSTALL_PREFIX=/usr/local/mariadb-5.5.53 \ -DMYSQL_DATADIR=/mydata/data \ -...

MariaDB:选择性二进制日志事件【图】

作为MariaDB一系列有趣特性的第一篇文章，我们从选择性跳过复制binlog事件开始。MariaDB 5.5和10支持此特性。默认情况下使用MySQ 作为MariaDB一系列有趣特性的第一篇文章，我们从选择性跳过复制binlog事件开始。MariaDB 5.5和10支持此特性。默认情况下使用MySQL标准复制功能时，所有事件都记录在二进制日志中，并复制到所有从机(可以过滤掉一些模式)。但使用此特性，可以在从机上跳过一些事件的复制，即使这些事件是被写入到二进制...

2.MariaDB激活二进制日志_MySQL

MariaDB bitsCN.com翻译人员: 铁锚翻译时间: 2013年12月25日原文地址: Activating the Binary Log参考了: 《高可用MySQL 构建健壮的数据中心》要启用二进制日志功能,可以使用 "--log-bin[=name]"选项来启动服务器.如果文件名中包含了后缀(例如 "--log-bin[=master-bin.log]"),则后缀(".log")将会被忽略.如果没有指定文件名,默认使用 datadir/log-basename-bin, datadir/mysql-bin 或者 datadir/mariadb-bin(如果也没有 --log-basen...

Mariadb之日志相关配置【代码】

#配置Mariadb日志日志有6种，分别是查询日志（general_log）,慢查询日志（log_slow_queries）,错误日志（log_error,log_warnings）,二进制日志（binlog）,中继日志（relay_log）和事务日志（innodb_log） #查询日志日志存储位置可放在表中，也可以放在文件中，这个要根据自己的配置，当然也可以同时放在表和文件中；一般情况服务器IO压力不大的情况下是可以开启查询日志的，如果服务器IO压力大，建议不要开启查询日志； #慢查询日...

Mariadb之日志相关配置【代码】【图】

前面我们聊到了mariadb的事务，以及事务隔离级别，回顾请参考https://www.cnblogs.com/qiuhom-1874/p/13198186.html；今天我们来聊一聊mariadb的日志相关话题；mariadb日志有6种，分别是查询日志（general_log）,慢查询日志（log_slow_queries）,错误日志（log_error,log_warnings）,二进制日志（binlog）,中继日志（relay_log）和事务日志（innodb_log）;1、查询日志，主要记录查询语句，日志存储位置可放在表中，也可以放在文件中...

MariaDB基于日志还原数据【图】

本地环境：操作系统版本：centos 7.7MariaDB版本：[root@controller ~]# mysql --versionmysql Ver 15.1 Distrib 5.5.65-MariaDB, for Linux (x86_64) using readline 5.1 简介：在实际生产环境中有时会出现误删数据的情况，Binlog日志，即二进制日志文件，用于记录用户对数据库操作的SQL语句信息，当发生数据误删除的时候我们可以通过binlog日志来还原已经删除的数据，还原数据的方法分为传统二进制文件还原数据。配置：1.Binlo...

基于mariadb的日志服务器及用loganalyzer实现日志的管理分析【代码】

日志文件和相关服务进程日志文件用来记录系统，服务等在运行过程中发生的事件，事件发生的时间及事件的关键性程序。这些记录的信息在服务器运行出现问题时用来查看分析，以便解决问题。在Linux上，日志的记录一般有两种方式，一种是由软件自身完成自身运行状态的记录，例如httpd；另一种是由Linux上提供的日志文件管理系统来统一管理。运行的软件只需要调用这个管理系统中的相关服务，即可完成日志的记录。rsyslog就是这样的一个...

mariadb日志【代码】

）避免多次重复重放事件的结束位置：（end_log_pos 19486）下一个事件的起始位置事件的类型：(Query) 事件发生时所在的服务器执行此事件的线程的ID：（thread_id=13）语句的时间戳与将其写入二进制文件中的时间差：（exec_time=0表示事件一产生就直接记录到日志中了）错误代码：（error_code=0) 事件内容：（SET TIMESTAMP=1409298607/*!*/处开始;） GTID事件专属：用于复制时定...

查看数据库日志（mariadb）

.log 三：完毕后及时关闭general log模式>set global general_log=0;查看数据库日志（mariadb）标签：本文系统来源：http://www.cnblogs.com/amusic/p/4952969.html

rsyslog日志管理（mariadb+loganalyzer）【代码】【图】

。loganalyzer所在系统：centos 7.11、安装LAMP：[root@localhost ~]# yum install httpd php php-mysql mariadb-server -y测试web可用（添加php测试页）：[root@localhost ~]# vim /var/www/html/index.php<?php phpinfo(); ?>[root@localhost ~]# systemctl start httpd #启动httpd服务。 [root@localhost ~]# systemctl start mariadb #启动mysql服务。2、客户端note2：安装rsyslog-mysql 用以支持mysql系...

给MariaDB开启日志审计功能【代码】【图】

下面来演示下如何操作：软件版本： MariaDB10.0.17 (自带了server_audit插件)MariaDB审计日志写到文件安装server_audit插件登陆进MariaDB，执行：> show variables like ‘%plugin%‘; 查看插件存放的目录cd /usr/local/mariadb/lib/plugin/ 查看有没有一个叫做server_audit.so的文件。如果没有的话，到http://www.skysql.com/downloads/mariadb-audit-plugin-beta去下载放到/usr/local/mariadb/lib/plugin/目录下即可。安...