首页 / MYSQL / mysqldump原理及实验

mysqldump原理及实验

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了mysqldump原理及实验，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含8077字，纯文字阅读大概需要12分钟。

内容图文

**********************mysqldump 所需权限*************************************

dump tables:SELECT

dump views:SHOW VIEW

dump triggers:TRIGGER

LOCK TABLES（如果不使用--single-transaction）

RELOAD,SUPER, REPLICATION CLIENT (--master-data=2)

数据库字符集更改：ALTER DATABASE

**********************mysqldump 适用场景************************************

全量表结构、存储过程、触发器等备份

单表（小表）备份

**********************mysqldump 缺点****************************************

逻辑备份，导出比较慢

单线程备份，5.7有mysqlpump以及开源版的mydumper可进行并行和压缩备份恢复

使用--single-transaction可实现在线备份，但是碰到操作时间过长的事物可能会使数据库出问题

5.6以下版本使用可能会使buffer pool热数据刷出，5.6及以上版本可通过innodb_old_blocks_time来控制热数据的进出

**********************mysqldump 常用语句****************************************

只导出表结构：

mysqldump -d --trigger=false

只导出存储过程：

mysqldump -f -Rtdn --trigger=false

只导出触发器：

mysqldump -f -tdn --trigger

只导出事件：

mysqldump -f -Etdn --triggers=False

只导出数据:

mysqldump -f --single-transaction --triggers=false -t

导出表中某些行：

mysqldump dbname --where="1=1 limit 1000"

在线建从库：

mysqldump --master-data=2 --single-transaction -A

**********************mysqldump 后台工作细节**************************************

查看general log是否打开：

mysql> set global general_log = on;

Query OK, 0 rows affected (0.01 sec)

mysql> show variables like ‘%general%‘;

+------------------+-----------------------------------------------------+

| Variable_name | Value |

+------------------+-----------------------------------------------------+

| general_log | ON |

| general_log_file | /app/data/mysql/3336/data/BJ-ECS-XHM-TEST-YL-19.log |

+------------------+-----------------------------------------------------+

2 rows in set (0.02 sec)

创建数据库及测试数据：

create database gaoquan;

create table t1(id int not null primary key auto_increment,name varchar(10) not null,age int not null);

insert into t1(name,age) values(‘name1‘,10),(‘name2‘,10),(‘name3‘,10),(‘name4‘,10),(‘name5‘,10),(‘name6‘,10),(‘name7‘,10),(‘name8‘,10),(‘name9‘,10);

create table t2(id int not null primary key auto_increment,name varchar(10) not null,age int not null);

insert into t2(name,age) values(‘name1‘,10),(‘name2‘,10),(‘name3‘,10),(‘name4‘,10),(‘name5‘,10),(‘name6‘,10),(‘name7‘,10),(‘name8‘,10),(‘name9‘,10);

创建mysqldump备份用户：

grant select,show view,trigger,lock tables on *.* to backup@‘%‘ identified by ‘backup007‘;

不开启--single-transaction执行备份：

/usr/local/mysql/bin/mysqldump -u backup -p gaoquan -h 10.50.12.33 -P 3336

general log 输出：

160105 11:29:55 296 Connectbackup@10.50.12.33 on

296 Query/*!40100 SET @@SQL_MODE=‘‘ */

296 Query/*!40103 SET TIME_ZONE=‘+00:00‘ */

296 QuerySHOW VARIABLES LIKE ‘gtid\_mode‘

296 QuerySELECT LOGFILE_GROUP_NAME, FILE_NAME, TOTAL_EXTENTS, INITIAL_SIZE, ENGINE, EXTRA FROM INFORMATION_SCHEMA.FILES WHERE FILE_TYPE = ‘UNDO LOG‘ AND FILE_NAME IS NOT NULL AND LOGFILE_GROUP_NAME IN (SELECT DISTINCT LOGFILE_GROUP_NAME FROM INFORMATION_SCHEMA.FILES WHERE FILE_TYPE = ‘DATAFILE‘ AND TABLESPACE_NAME IN (SELECT DISTINCT TABLESPACE_NAME FROM INFORMATION_SCHEMA.PARTITIONS WHERE TABLE_SCHEMA IN (‘gaoquan‘))) GROUP BY LOGFILE_GROUP_NAME, FILE_NAME, ENGINE ORDER BY LOGFILE_GROUP_NAME

296 QuerySELECT DISTINCT TABLESPACE_NAME, FILE_NAME, LOGFILE_GROUP_NAME, EXTENT_SIZE, INITIAL_SIZE, ENGINE FROM INFORMATION_SCHEMA.FILES WHERE FILE_TYPE = ‘DATAFILE‘ AND TABLESPACE_NAME IN (SELECT DISTINCT TABLESPACE_NAME FROM INFORMATION_SCHEMA.PARTITIONS WHERE TABLE_SCHEMA IN (‘gaoquan‘)) ORDER BY TABLESPACE_NAME, LOGFILE_GROUP_NAME

296 QuerySHOW VARIABLES LIKE ‘ndbinfo\_version‘

296 Init DBgaoquan

296 Queryshow tables

296 QueryLOCK TABLES `t1` READ /*!32311 LOCAL */,`t2` READ /*!32311 LOCAL */

296 Queryshow table status like ‘t1‘

296 QuerySET SQL_QUOTE_SHOW_CREATE=1

296 QuerySET SESSION character_set_results = ‘binary‘

296 Queryshow create table `t1`

296 QuerySET SESSION character_set_results = ‘utf8‘

296 Queryshow fields from `t1`

296 QuerySELECT /*!40001 SQL_NO_CACHE */ * FROM `t1`

296 QuerySET SESSION character_set_results = ‘binary‘

296 Queryuse `gaoquan`

296 Queryselect @@collation_database

296 QuerySHOW TRIGGERS LIKE ‘t1‘

296 QuerySET SESSION character_set_results = ‘utf8‘

296 Queryshow table status like ‘t2‘

296 QuerySET SQL_QUOTE_SHOW_CREATE=1

296 QuerySET SESSION character_set_results = ‘binary‘

296 Queryshow create table `t2`

296 QuerySET SESSION character_set_results = ‘utf8‘

296 Queryshow fields from `t2`

296 QuerySELECT /*!40001 SQL_NO_CACHE */ * FROM `t2`

296 QuerySET SESSION character_set_results = ‘binary‘

296 Queryuse `gaoquan`

296 Queryselect @@collation_database

296 QuerySHOW TRIGGERS LIKE ‘t2‘

296 QuerySET SESSION character_set_results = ‘utf8‘

296 QueryUNLOCK TABLES

296 Quit

原理：

加全局读锁(防止备份数据不一致)->当前字符集会做一些处理，防止乱码->获取建表信息生成建表语句->获取行记录从而转换成insert插入语句->释放读锁

开启--single-transaction备份：

/usr/local/mysql/bin/mysqldump -u backup -p gaoquan -h 10.50.12.33 -P 3336 --single-transaction

160105 11:33:41 298 Connectbackup@10.50.12.33 on

298 Query/*!40100 SET @@SQL_MODE=‘‘ */

298 Query/*!40103 SET TIME_ZONE=‘+00:00‘ */

298 QuerySET SESSION TRANSACTION ISOLATION LEVEL REPEATABLE READ

298 QuerySTART TRANSACTION /*!40100 WITH CONSISTENT SNAPSHOT */

298 QuerySHOW VARIABLES LIKE ‘gtid\_mode‘

298 QueryUNLOCK TABLES

298 QuerySELECT LOGFILE_GROUP_NAME, FILE_NAME, TOTAL_EXTENTS, INITIAL_SIZE, ENGINE, EXTRA FROM INFORMATION_SCHEMA.FILES WHERE FILE_TYPE = ‘UNDO LOG‘ AND FILE_NAME IS NOT NULL AND LOGFILE_GROUP_NAME IN (SELECT DISTINCT LOGFILE_GROUP_NAME FROM INFORMATION_SCHEMA.FILES WHERE FILE_TYPE = ‘DATAFILE‘ AND TABLESPACE_NAME IN (SELECT DISTINCT TABLESPACE_NAME FROM INFORMATION_SCHEMA.PARTITIONS WHERE TABLE_SCHEMA IN (‘gaoquan‘))) GROUP BY LOGFILE_GROUP_NAME, FILE_NAME, ENGINE ORDER BY LOGFILE_GROUP_NAME

298 QuerySELECT DISTINCT TABLESPACE_NAME, FILE_NAME, LOGFILE_GROUP_NAME, EXTENT_SIZE, INITIAL_SIZE, ENGINE FROM INFORMATION_SCHEMA.FILES WHERE FILE_TYPE = ‘DATAFILE‘ AND TABLESPACE_NAME IN (SELECT DISTINCT TABLESPACE_NAME FROM INFORMATION_SCHEMA.PARTITIONS WHERE TABLE_SCHEMA IN (‘gaoquan‘)) ORDER BY TABLESPACE_NAME, LOGFILE_GROUP_NAME

298 QuerySHOW VARIABLES LIKE ‘ndbinfo\_version‘

298 Init DBgaoquan

298 QuerySAVEPOINT sp

298 Queryshow tables

298 Queryshow table status like ‘t1‘

298 QuerySET SQL_QUOTE_SHOW_CREATE=1

298 QuerySET SESSION character_set_results = ‘binary‘

298 Queryshow create table `t1`

298 QuerySET SESSION character_set_results = ‘utf8‘

298 Queryshow fields from `t1`

298 QuerySELECT /*!40001 SQL_NO_CACHE */ * FROM `t1`

298 QuerySET SESSION character_set_results = ‘binary‘

298 Queryuse `gaoquan`

298 Queryselect @@collation_database

298 QuerySHOW TRIGGERS LIKE ‘t1‘

298 QuerySET SESSION character_set_results = ‘utf8‘

298 QueryROLLBACK TO SAVEPOINT sp

298 Queryshow table status like ‘t2‘

298 QuerySET SQL_QUOTE_SHOW_CREATE=1

298 QuerySET SESSION character_set_results = ‘binary‘

298 Queryshow create table `t2`

298 QuerySET SESSION character_set_results = ‘utf8‘

298 Queryshow fields from `t2`

298 QuerySELECT /*!40001 SQL_NO_CACHE */ * FROM `t2`

298 QuerySET SESSION character_set_results = ‘binary‘

298 Queryuse `gaoquan`

298 Queryselect @@collation_database

298 QuerySHOW TRIGGERS LIKE ‘t2‘

298 QuerySET SESSION character_set_results = ‘utf8‘

298 QueryROLLBACK TO SAVEPOINT sp

298 QueryRELEASE SAVEPOINT sp

298 Quit

原理：

更改当前会话隔离级别为rr->开始事物->释放表锁->导出建表语句->设置一个savepoint->导出表数据->回滚到savepoint sp->对其他表重复该过程->最后释放savepoint

整个过程，没有任何锁。RR隔离级别保证在事务中只读取本事务之前的一致性的数据。 rollback to savepoint sp; 保证了对数据库中的数据没有影响。

mysqldump原理及实验

标签：mysqldump

本文系统来源：http://gaoquan.blog.51cto.com/4503718/1731721

内容总结

以上是互联网集市为您收集整理的mysqldump原理及实验全部内容，希望文章能够帮你解决mysqldump原理及实验所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/459471.html

来源：【匿名】

【上一篇】ubantu下编译安装mysql5.6.28文档【下一篇】用IE远程创建Mysql数据库的简易程序

更多 ►

【mysqldump原理及实验】教程文章相关的互联网学习教程文章

Mysql备份还原数据库之mysqldump实例及参数详细说明【代码】

我们在运营项目的过程中肯定会遇到备份数据库，还原数据库的情况，我们一般用一下两种方式来处理：1.使用into outfile 和 load data infile导入导出备份数据这种方法的好处是，导出的数据可以自己规定格式，并且导出的是纯数据，不存在建表信息，你可以直接导入另外一个同数据库的不同表中，相对于mysqldump比较灵活机动。我们来看下面的例子：（1）下面的mysql命令是把select的mytable表中的数据导出到/home/db_bak2012文件。sele...

mysqldump 备份直接至压缩文件，提高备份及压缩时间

https://www.cnblogs.com/dbcloud/p/6289577.html 1、备份及压缩分开1备份 mysqldump --single-transaction -hlocalhost --all-databases --triggers --routines --events -P3306 -uroot -pxxxx >/data/test.sql1tar czvf test.tar.gz /data/test.sql --remove-files1 还原 tar xzvf test.tar.gz 1mysql -hlocalhost -uroot -pxxxxx </data/test.sql2、备份后直接压缩写入磁盘1备份mysqldump...

Mysqldump 常用备份操作命令

1.1.1 备份操作create user ‘backup’@’localhost’ identifiedby ‘’;grant select, reload, lock tables,replication client, show view, event, view, process on *.* to‘backup’@’localhost’;mysqldump –ubackup –p –master-data=2–single-transaction –routines –triggers –events mc_orderdb >mc_orderdb.sql 备份一个库mysqldump –ubackup –p –master-data=2–single-transaction –routines –trigge...

auto_mysqldump_data.sh

#!/bin/bash#2019年10月31日22:57:25#auto back mysql‘s databaseIPADDR="10.0.0.7"BAK_TIME=date +%F-%TMYSQL_USER="backup"MYSQL_PASS="123456"MYSQL_COM1="mysqldump"MYSQL_COM2="mysql"SQL_DIR="/data/mysqlback/"SQL_DBS="$*"if [ $# -eq 0 ]; thenecho -e "\033[33m-----------------------------------\033[0m"echo -e "\033[31m-->{Usage:(eg:$0 jf1 | jf1 jf2 .. | all )}\033[0m"echo -e "\033[33m--------------------...

使用mysqldump迁移数据【代码】

1、先停止业务，使用MySQLdump的数据导出工具，将您线下原有数据库数据导出为数据文件mysqldump -hlocalhost -uroot --default-character-set=utf8 -R db_name -p*********** > ./tmp.sql2、查看原数据库上查看用户的授权信息，拷贝到新数据库select a.user,a.host from user a where a.user = ‘user_name;show grants for user_name@‘ip‘;3、在新数据库上执行GRANT USAGE ON *.* TO ‘user_name‘@‘ip‘ IDENTIFIED BY P...

使用mysqldump对数据库备份【代码】

mysqldump是一个简单而有效的数据库备份程序，它会将需要备份的数据库的结构转换为mysql语言组成的一个文本文件，这个文本文件包含了创建这个数据库所进行的所有mysql语句，所以当我们恢复时，便是程序读取这些语句重新创建数据库、创建表以及插入数据的过程，但因为其是单线程的，所以对于比较大的数据库操作会比较慢。mysqldump支持InnoDB热备，MyISAM的温备，可以基于二进制日志进行增量备份，根据二进制文件文件中记录的操作...

mysqldump命令详解【代码】

今天遇到一个需求就是需要导出MySQL数据库中的函数和存储过程，其他对象无需导出，上网查了一些资料，感觉mysqldump命令各种参数值的研究一下。1、只导出函数和存储过程，其他无需导出[root@multi-mysql ~]# mysqldump -uoldcatm -poldcat123 -S /data/3306/mysql.sock -R -ntd oasys > /home/oldcat/data/backup/tmp.sql 参数说明： -R --routines：Dump stored routines (functions and procedures) 导出存储过程和函数。原文：h...

MySQL备份-mysqldump【代码】

一先建立备份账号create user ‘backup‘@‘localhost‘ identified by ‘pass4word‘;二赋予权限grant select,reload,lock tables,replication client,show view,event,process on *.* to ‘backup‘@‘localhost‘;附加，查看创建表的语句show create table table_name; 三备份单个数据库 mysqldump -ubackup -ppass4word --master-data=2 --single-transaction --routines --triggers --events tk_test >tk.sql 原文：https://w...

mysql使用mysqldump 与 mysqlimport进行数据库迁移

1.导入数据库1）sourcesource /home/platvt/product/pc2_create_tables.sql2）mysqlimport使用mysqlimport导入数据：出现情况：（1）出现 Error: 1146[platvt@qa-qd-62-180 tmp]$ mysqlimport -uroot -p --fields-terminated-by=‘\t‘ test students Enter password: mysqlimport: Error: 1146, Table ‘test.students‘ doesn‘t exist, when using table: students在导入之前必须数据库里面有对应的表，所以必须先在数据库里面...

mysqldump使用分库备份的脚本

#!/bin/sh#Author:LuojqBAKTIME=$(date +%Y-%m-%d%H:%M:%S)USER_PSWD=123456USER_NAME=rootMYLOGIN="mysql -u${USER_NAME} -p${USER_PSWD}"DUMP_CMD="/usr/bin/mysqldump -u${USER_NAME} -p${USER_PSWD} -B --master-data=2 --single_transaction --flush-logs --skip-add-drop-table"DATABASE="$($MYLOGIN -e "show databases;"|egrep -vi "_schema|mysql")" for dbname in ${DATABASE}doMYDIR=/data/backup/${dbname}[ ! -d ${...

逻辑备份,mysqldump,SELECT…INTO OUTFILE,恢复

逻辑备份mysqldumpmysqldump备份工具最初由Igor Romanenko编写完成，通常用来完成转存（dump）数据库的备份以及不同数据库之间的移植，例如从低版本的MySQL数据库升级到高版本的MySQL数据库，或者从MySQL数据库移植到Oracle和SQL Server等数据库等。mysqldump的语法如下：mysqldump [arguments] ＞ file_name如果想要备份所有的数据库，可以使用--all-databaes选项：mysqldump --all -databases ＞ dump.sql如果想要备份指定的数据...

mysqldump如何针对某些数据库进行备份?针对某个数据库进行备份?【代码】

需求描述:　　通过mysqldump工具对mysql服务器中的某几个数据库进行备份.　　或者就对其中的一个数据库进行备份.操作过程:1.通过--databases参数后面加上数据库的名字进行备份[mysql@redhat6 MysqlDb_Backup]$ mysqldump -uroot -p --single-transaction --master-data --flush-logs --databases top_server test01 > Backup_2018-04-09.sql Enter password: [mysql@redhat6 MysqlDb_Backup]$ ls -ltr total 2111792 -rw-rw-r-- 1...

mysqldump完全备份shell脚本

#!/bin/bash #?Date:2017-10 #?Version:0.1 #?Description:db_user="root" myisam_db="mysql" db_passwd="123456" host="localhost" backup_dir="/opt/backup/mysql/sql" log_file="/opt/backup/mysql/sql/mysql_backup.log" keep_days=30 mysql="$(which?mysql)" mysqldump="$(which?mysqldump)" db_list=$(mysql?-h$host?-u$db_user?-p$db_passwd?-e?‘show?databases‘|egrep?-v?‘Database|information_schema|mysql|performan...

MySQL--当mysqldump --single-transaction遇到alter table【代码】【图】

部分生产环境采用mysqldump --single-transaction的方式在夜间进行数据库备份，而同事恰好在备份期间执行了alter table操作，操作部分成功部分失败，为啥呢？在mysqldump对single-transaction参数的解释为：Creates a consistent snapshot by dumping all tables in asingle transaction. Works ONLY for tables stored instorage engines which support multiversioning (currentlyonly InnoDB does); the dump is NOT guaranteed...

mysql mysqldump只导出表结构或只导出数据的实现方法

mysql mysqldump 只导出表结构不导出数据复制代码代码如下:mysqldump --opt -d 数据库名 -u root -p > xxx.sql 备份数据库复制代码代码如下:#mysqldump　数据库名　>数据库备份名 #mysqldump　-A　-u用户名　-p密码　数据库名>数据库备份名 #mysqldump　-d　-A　--add-drop-table　-uroot　-p　>xxx.sql 1.导出结构不导出数据复制代码代码如下:mysqldump　--opt　-d　数据库名　-u　root　-p　>　xxx.sql　　 2.导出数据不导出结...

MYSQL - 技术教程分类

MySQL 教程 MySQL 安装 MySQL 管理 MySQL PHP 语法 MySQL 连接 MySQL 创建数据库 MySQL 删除数据库 MySQL 选择数据库 MySQL 数据类型 MySQL 创建数据表 MySQL 删除数据表 MySQL 插入数据 MySQL 查询数据 MySQL WHERE 子句 MySQL UPDATE 更新 MySQL DELETE 语句 MySQL LIKE 子句 MySQL UNION MySQL 排序 MySQL 分组 MySQL 连接的使用 MySQL NULL 值处理 MySQL 事务 MySQL ALTER命令 MySQL 索引 MySQL 临时表 MySQL 复制表 MySQL 元数据 MySQL 序列使用 MySQL 处理重复数据 MySQL 及 SQL 注入 MySQL 导出数据 MySQL 导入数据 MySQL 函数 MySQL 运算符 mysql 全部

MYSQL - 最热教程

sql分组取最大记录方法 mysql如何设置默认值 mysql创建数据表时指定默认值教程 MySQL 5.7 的初始化操作（root初始密码...Oracle中合并数据集(多行变一行)mysql 相同内容的字段合并为一条的方法解决mysql设置时区时的错误Unknown or ...解决ubuntu下mysql的'Access denied fo...ubuntu系统中MysqlERROR1045(28000)报错...mysql数据库设置不区分大小写

首页 / MYSQL / mysqldump原理及实验

mysqldump原理及实验

内容导读

内容图文

内容总结

内容备注

内容手机端

【mysqldump原理及实验】教程文章相关的互联网学习教程文章

MYSQL - 技术教程分类

MYSQL - 最新教程

MYSQL - 最热教程