首页 / MYSQL / 第五章：MySQL主从复制
第五章：MySQL主从复制
内容导读
互联网集市收集整理的这篇技术教程文章主要介绍了第五章：MySQL主从复制，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含21650字，纯文字阅读大概需要31分钟。
内容图文
1. 主从MySQL主从复制介绍... 1
2. MySQL主从复制的企业应用场景... 3
3. 实现MySQL主从读写分离的方案... 5
4. MySQL主从复制原理... 7
5. 主从复制实战... 8
5.1 MySQL主从配置... 8
5.2 MySQL数据库级联配置... 12
5.3 MySQL主从复制配置步骤小结... 15
5.4 主从配置表示成功后的关键参数说明... 15
5.5 MySQL主从复制配置问题汇总... 16
6. MySQL主从复制更多应用技巧... 17
1. 主从MySQL主从复制介绍
MySQL的主从复制方案，其实就和文件及文件系统级别同步是类似的，都是数据的传输，只不过MySQL无需借助第三方工具，而是自带的同步复制功能，另外一点，MySQL的主从复制并不是磁盘上文件直接同步，而是逻辑的binlog日志同步到本地在应用执行的过程。
MySQL数据库支持单向、双向、链式级联等不同场景的复制，在复制过程中，一台服务器充当主服务器（Master），而一个或多个其它的服务器充当从服务器（Slave）。
复制可以单向：M==>S；可以双向：M<==>S；当然也可以多M环装同步等。
如果设置了链式级联复制，那么，从（slave）服务器本身除了充当从服务器外，也会同时充当其下面从服务器的主服务器，链式级联复制类似A==>B==>C==>D的复制形式。
下面是MySQL各种同步结构的逻辑图：
1. 单向主从复制逻辑图，此架构只能在Master端进行数据写入
2. 双向主主同步逻辑图，此架构可以在Master1端或Master2端进行数据写入
3. 线性级联单向双主同步逻辑图，此架构只能在Master端进行数据写入
4. 环装级联单向多主同步逻辑图，任意一个点都可以写入数据
5. 环装级联单向多主多从同步逻辑图，次架构只能在任意一个master端进行数据写入
6. MySQL官方同步架构图
在当前的生产环境中，MySQL主从复制都是异步的复制方式，既不是严格实时的数据同步。
2. MySQL主从复制的企业应用场景
MySQL主从复制集群功能使得MySQL数据库支持大规模高并发读写称为可能，同时有效的保护了物理服务器宕机场景的数据备份。
应用场景1：从服务器作为主服务器的实时数据备份
主从服务器架构的设置可以大大加强MySQL数据库架构的健壮性，例如：当主服务器出现问题时，我们可以人工或设置自动切换到从服务器继续提供服务，此时从服务器的数据与宕机时的数据库几乎是一致的。
这类似NFS存储数据通过inotify+rsync同步到备份的NFS服务器，只不过MySQL的复制方案是其自带的工具。
利用MySQL的复制功能进行数据备份时，在硬件故障、软件故障的场景下，该数据备份是有效的，但对于人为执行drop、delete等语句删除数据的情况，从库的备份功能就没用了，因为从服务器也会执行删除的语句。
应用场景2：主从服务器实现读写分离，从服务器实现负载均衡
主从服务器架构可通过（PHP、java等）或代理软件（mysql-proxy、Amoeba）实现对用户（客户端）的请求读写分离，揖让从服务器金聪处理用户的select查询请求，降低用户查询响应时间，以及同时读写在主服务器上带来的访问压力，对于更新的数据（例如：update、insert、delete语句），则仍然交给主服务器处理，确保主服务器和从服务器保持实时同步。
应用场景3：把多个从服务器根据业务重要性进行拆分访问
可以把几个不同的从服务器，根号月公司的业务进行拆分，例如：在为外部用户提供查询服务的从服务器，在内部DBA用来数据备份的从服务器，还有为公司内部人员提供访问的后台、脚本、日志分析及供开发人员查询使用的从服务器，这样拆分除了减轻主服务器的压力外，还可以是数据库对外不用户浏览，内部用户业务处理及DBA人员的备份等互不影响。
3. 实现MySQL主从读写分离的方案
（1）通过程序实现读写分离（性能和效率最佳，推荐）
PHP和java程序都可以通过设置多个连接文件轻松地实现对数据库的读写分离，即当语句关键字为select时，就去连接读库的连接文件，若为update、insert、delete时，则连接写库的文件。
通过程序实现读写分离的缺点就是需要开发人员对程序进行改造，使其对下层不透明，但这种方式更容易开发和实现，适合互联网业务场景。
（2）通过开源的软件实现读写分离
MySQL-Proxy、Amoeba等代理软件也可以是实现读写分离功能，这些软件的稳定性和功能一般，不建议生产使用，绝大多数公司常用的还是在应用端发程序实现读写分离。
（3）大型门户独立开发DAL层综合软件
百度、阿里等大型门户都有开发牛人，会花大力气开发适合自己业务的读写分离，负载均衡，监控报警，自动扩容，自动收缩等一系列功能的DAL层软件。
4. MySQL主从复制原理
简单描述MySQL Replication的复制原理过程
1. 在Slave服务器上执行start slave命令开启主从复制开关，开始进行主从复制。
2. 此时，slave服务器的I/O线程会通过在Master上已经授权的复制用户权限请求选择Master服务器，并 请求从指定binlog日志文件的指定位置（日志文件名和位置就是在哦诶之主从渎职服务时执行change master命令指定的）之后，之后开始发送binlog日志内容。
3. Master服务器接收来自slave服务器的IO线程的请求后，其上负责复制的I/O线程会根据slave服务器 的io线程请求的信息分批读取指定binlog日志文件指定位置之后的binlog日志信息，然后返回给 slave端的I/O线程，返回的信息中除了binlog日志内容外，还有在master服务器端记录的新的binlog 文件名称，以及在新的binlog中的下一个指定的跟新位置。
4. 当slave服务器的io线程获取带master服务器上io线程发送的日志内容，日志文件及位置点后，会将 binlog日志内容写到slave端自身的relay loy（即中继日志）的最末端，并将新的binlog日志文件名 和位置点记录到master-info文件中，以便下一次读取master端新的binlog日志是能够告诉master服 务端从新的binlog日志指定文件及位置开始请求新的binlog日志内容。
5.slave服务器端的SQL线程会实时监测本地relay log中的io线程新增加的日志内容。然后及时的把 relay.log文件中的内容解析成SQL语句，并且自身slave服务器上按解析sql语句的位置顺序执行应用 这些SQL语句，并在relay-log.info中记录当前应用中继日志文件名及位置点。
MySQL主从复制原理的重点小结：
主从复制是异步的逻辑的SQL语句级的复制
复制时，主库有一个线程，从库有两个线程，即I/O和SQL线程
实现主从复制的前提条件时主库开启记录binlog功能
作为复制的所有MySQL节点的sever id都不能相同
binlog文件只记录对数据有更改的SQL语句（来自主数据库内容的变更），不记录任何查询（如：select、show）语句。
5. 主从复制实战
实现主从复制条件
开启binlog功能。
主库建立同步账号。
从库配置master.info（change master..）。
startslave复制开关。
5.1 主从配置
如图：
配置主从复制
测试环境：使用一台服务器，多实例，一个实例做主，另外的实例做从（多台服务器也一样）
（1）主库操作
1. 先确认主库binlog功能是否开启和各个实例server-id实例的不同
[root@db01 3308]# egrep "log-bin|server-id" /data/{3306,3307}/my.cnf
/data/3306/my.cnf:log-bin= /data/3306/mysql-bin
/data/3306/my.cnf:server-id= 1
/data/3307/my.cnf:#log-bin= /data/3307/mysql-bin
/data/3307/my.cnf:server-id= 32. 主库授权同步的用户
[root@db01 /]# mysql -uroot -poldboy123 -S /data/3306/mysql.sock #<== 登录数据库 mysql> grant replication slave on *.* torep@‘172.16.1.%‘ identified by ‘oldboy123‘; Query OK, 0 rowsaffected (0.00 sec) #<== 创建rep用户并授权 mysql> flush privileges; #<== 刷新数据库 Query OK, 0 rowsaffected (0.00 sec) mysql> select user,host from mysql.user; #<== 创建用户后查看确认 mysql> show grants for rep@‘172.16.1.%‘; #<== 查看rep用户权限
3. 备份前对主数据库锁表（只读）
mysql> flush table with read lock; Query OK, 0 rowsaffected (0.00 sec)
测试：单开一个窗口，创建一个数据库（这时会发现创建不了，因为表锁了）
mysql> create database oldgirl;
4. 查看全备与增量之间的临界点
mysql> show master status; +-----------------+------------+---------------+------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | +-----------------+------------+---------------+------------------+ | mysql-bin.000016| 4065 | | | +-----------------+------------+---------------+------------------+ 1 row in set (0.00sec)
5. 开始备份
创建备份目录
[root@db01 ~]# mkdir -p /server/backup/
全备
[root@db01~]# mysqldump -uroot -poldboy123 -S/data/3306/mysql.sock -B -A --events|gzip >/server/backup/rep_bak_$(date+%F).sql.gz [root@db01 ~]# ll -htr /server/backup/|tail -1 -rw-r--r-- 1 root root 149K Aug 31 23:57rep_bak_2016-08-31.sql.gz
6. 因为数据已经备份完，所以可以开放用户写入功能，此时会发现测试窗口的数据会写入
mysql> unlock tables; Query OK, 0 rows affected (0.00 sec)
（2）从库操作
1. 确保所有用户server-id不同（主库已经确认过）
[root@db01 3308]# egrep "log-bin|server-id" /data/{3306,3307}/my.cnf
/data/3306/my.cnf:log-bin= /data/3306/mysql-bin
/data/3306/my.cnf:server-id= 1
/data/3307/my.cnf:#log-bin= /data/3307/mysql-bin
/data/3307/my.cnf:server-id= 32. 把主库的全备导入到从库
[root@db01 ~]# gzip -d/server/backup/rep_bak_2016-08-31.sql.gz [root@db01 ~]# ll /server/backup/rep_bak_2016-08-31.sql -rw-r--r-- 1 root root 552788 Aug 31 23:57//server/backup/rep_bak_2016-08-31.sql [root@db01 ~]# mysql -uroot -poldboy123 -S/data/3307/mysql.sock </server/backup/rep_bak_2016-08-31.sql
3. 找位置点，开始配置masterinfo
[root@db01 3307]# mysql -uroot -poldboy123 -S/data/3307/mysql.sock CHANGE MASTER TO MASTER_HOST=‘172.16.1.51‘, #<== 主库IP MASTER_PORT=3306, #<== 主库端口（如果配置一主多从可不写，默认） MASTER_USER=‘rep‘, #<== 这里是主库上建立的用于复制的用户rep MASTER_PASSWORD=‘oldboy123‘, #<== rep用户密码 MASTER_LOG_FILE=‘mysql-bin.000016‘, #<== 这里是showmaster status; 时看到的临界点binlog文件，注意，这里不能多空格 MASTER_LOG_POS=107; #<== 这是showmaster status; 查看二进制文件偏移量，注意，不能多空格 [root@db01 ~]# ll /data/3307/ -rw-rw---- 1 mysql mysql 51 Sep 1 03:40 relay-log.info
参数如下：
CHANGE MASTER TO MASTER_HOST=‘172.16.1.51‘, MASTER_PORT=3306, MASTER_USER=‘rep‘, MASTER_PASSWORD=‘oldboy123‘, MASTER_LOG_FILE=‘mysql-bin.000016‘, MASTER_LOG_POS=107;
4. 开启同步开关
mysql> start slave; Query OK, 0 rowsaffected (0.01 sec)
5. 查看同步状态，看到以下黄色部分是以下状态就算成功
mysql> show slave status\G *************************** 1. row*************************** -----------------------省略部分内容------------ Relay_Master_Log_File: mysql-bin.000017 Slave_IO_Running: Yes #<== 看这IO线程yes和SQLyes就成功了 Slave_SQL_Running: Yes Replicate_Do_DB: -------------------------------------省略----------- Seconds_Behind_Master: 0 #<== 主到从复制的延迟 1 row in set (0.00 sec)
或者使用命令查看：
mysql -S /data/3307/mysql.sock -e"show slave status\G"|egrep -i "_running|Behind " Slave_IO_Running: Yes Slave_SQL_Running: Yes Seconds_Behind_Master: 0
（3）简单测试是否成功
1. 在主库创建数据库，查看从库是否同步
[root@db01 3307]# mysql -uroot -poldboy123 -S/data/3306/mysql.sock mysql> show databases; +-----------------------+ | Database | +-----------------------+ | information_schema | | mysql | | performance_schema | +-----------------------+ 8 rows in set (0.00 sec)
mysql> create database testdatabase; Query OK, 1 row affected (0.00 sec) mysql> show databases; +-----------------------+ | Database | +-----------------------+ | information_schema | | mysql | | performance_schema | | testdatabase | +-----------------------+ 9 rows in set (0.00 sec)
登录从库查看
[root@db01 3307]# mysql -uroot -poldboy123 -S/data/3307/mysql.sock mysql> show databases; +-------------------------------+ | Database | +-------------------------------+ | information_schema | | mysql | | performance_schema | | testdatabase | +-------------------------------+ 9 rows in set (0.00 sec)
------------------成功！！！-------------------
5.2 MySQL数据库级联配置
说明：在配置了MySQL一主一从或MySQL一主多从的情况下，在该基础上的从库下面在配置一台从库，构成线性级联单向双主同步。
环境：在以上5.1的配置上继续配置级联
以下在以上配置的3307从库上操作
1. 开启从库3309记录binlog日志功能，配置如下：
[root@db01 3307]# vim /data/3307/my.cnf [mysqld] log-slave-updates #<==在从库上配置binloa文件时，此行也是必须加的 log-bin = /data/3309/mysql-bin
重启生效
[root@db01 3307]# /data/3307/mysql restart Restarting MySQL... Stoping MySQL... Starting MySQL..
2. 全备3307从库实例，导入到3309
[root@db01 3307]# mysqldump -uroot -poldboy123 -S/data/3307/mysql.sock -B -A --master-data=1 --events>/server/backup/3307.sql [root@db01 3307]# mysql -uroot-poldboy123 -S /data/3309/mysql.sock </server/backup/3307.sql
以下步骤在3309上面操作
3. 在3309上面配置master info文件
[root@db01 3309]# mysql -uroot -poldboy123 -S/data/3309/mysql.sock mysql> CHANGE MASTER TO ->MASTER_HOST=‘172.16.1.51‘, ->MASTER_PORT=3307, ->MASTER_USER=‘rep‘, ->MASTER_PASSWORD=‘oldboy123‘; Query OK, 0 rows affected (0.01 sec) 说明：这里没有进行查看并指定binlog文件的位置点是因为备份时已经使用参数-x（锁表），和--master-data=1 （标记binlog文件数据位置）两个参数，--master-data=1会自动会自动生成位置点。
参数如下：
CHANGEMASTER TO MASTER_HOST=‘172.16.1.51‘, MASTER_PORT=3307, MASTER_USER=‘rep‘, MASTER_PASSWORD=‘oldboy123‘;
4. 在3309上面开启slave开关
mysql> start slave; Query OK, 0 rows affected (0.00 sec)
5. 查看状态
mysql> show slave status\G Slave_IO_Running: Yes Slave_SQL_Running: Yes Seconds_Behind_Master: 0 说明：以上输出部分内容省略，只要以上三行是该状态就表示正确（此三行是配置成功标志最关键的参数）
# 还可以在命令行外执行命令查看，如下：
[root@db01 3309]# mysql -uroot -poldboy123 -S/data/3309/mysql.sock -e "showslave status\G"|egrep -i "_running|Seconds" Slave_IO_Running: Yes Slave_SQL_Running: Yes Seconds_Behind_Master: 0
测试：
在主库3306里面写入数据，这时在3307库里面和3309库里面就会同时有啦，如下：
# 在3306查看并创建数据库
[root@db01 3308]# mysql -uroot -poldboy123 -S/data/3306/mysql.sock mysql> show databases; +---------------------+ | Database | +---------------------+ | information_schema | | mysql | | oldboy | | performance_schema | +---------------------+ 4 rows in set (0.00 sec)
mysql> create database zyl; #<== 创建名为zyl的库
mysql> show databases; #<==在3306上面查看 +-------------------------------+ | Database | +-------------------------------+ | information_schema | | mysql | | oldboy | | performance_schema | | zyl | +-------------------------------+ 5 rows in set (0.00 sec)[
[root@db01 3307]# mysql -uroot -poldboy123 -S/data/3307/mysql.sock mysql> show databases; #<==在3307上面查看 +-------------------------------+ | Database | +-------------------------------+ | information_schema | | mysql | | oldboy | | performance_schema | | zyl | +-------------------------------+ 5 rows in set (0.00 sec)
[root@db01 3307]# mysql -uroot -poldboy123 -S/data/3309/mysql.sock mysql> show databases; #<==在3309上面查看 +---------------------+ | Database | +---------------------+ | information_schema | | mysql | | oldboy | | performance_schema | | zyl | +---------------------+ 5 rows in set (0.00 sec)
报错原因： 1. 防火墙原因；
2. 复制账号和密码不对。
5.3 MySQL主从复制配置步骤小结
1. 一主一从环境为一台服务器（多实例），3306为主，3307为从，3309为级联。
2. 配置my.cnf文件，主库配置bin-log和server-id出本书，从库配置sever-id，该值个库不能一样，一般不开启从库的binlog功能，但是在5.2因为在3307从库下还有配置级联从库，所以需要开启。配置这些参数要重启才能生效。
3. 登录主库，增加从库连接主库同步的账户，例如：rep、并授权replication slave复制同步的权限。
4. 登录主库，整库锁表flus tablewith read lock（窗口关闭后即失效，超时参数设定的时间到了，锁表也会失效），然后show master status查看binlog的位置状态。
5 . 离开窗口，在linux命令行备份导出原有的数据库数据，并拷贝到从库所在的服务器目录，如果数据量庞大，并且允许停机，可以停机打包，而不用mysqldump。
6. 导出主库数据后，执行unlocktables解锁主库。
7. 把主库导出的数据恢复到从库。
8. 根据主库的show masterstatus查看到的binlog的位置状态，在从库执行change master to...语句。
9. 从库开启复制开关，即执行Lstartslave；。
5.4 主从配置表示成功后的关键参数说明
主从复制是否配置成功，最关键的是下面的3项状态参数
Slave_IO_Running:Yes：
这个是I/O线程状态，I/O线程复制从主库到从库读取binlog日志，并写入从库的中继日志，状态为yes表示I/O线程工作正常。
Slave_SQL_Running:Yes：
这个是SQL线程状态，SQL线程负责读取中继日志（relay-log）中的数据并装换为SQL语句应用到数据库中，状态为YES表示I/O线程工作正常。
Seconds_Behind_Master:0：
这个是复制过程中从库比主库延迟的描述，这个参数很重要，但企业更准确地判断主从延迟的方法为：在主库写时间戳，然后从库读取时间戳，和当前数据库时间进行比较，从而认定是否延迟。
5.5 MySQL主从复制配置问题汇总
1. 主库show master status没返回状态结果，如下：
mysql> show master status; 0 row in set (0.00 sec)
原因：binlog功能开关没开或没生效导致。正确开启方式如下：
[root@db01 3307]# grep "log-bin"/data/3306/my.cnf log-bin = /data/3306/mysql-bin #<== 在配置文件中将此行注释打开 [root@db01 3307]# mysql -uroot -poldboy123 -S /data/3306/mysql.sock-e "show variables like ‘log_bin‘;" #<== 修改后查看结果 +---------------+-------+ | Variable_name | Value | +---------------+-------+ | log_bin | ON | +---------------+-------+
2. 出现错误信息：“Last_IO_Error:GOTdatal errow 1236 drom master when when reading data from binary log; ‘ Couldnot find first log file name in binary log index file’ ”
原因：以上故障原因是执行CHANGE MASTER 命令时，某一个参数的值多个空格导致，如下：
CHANGE MASTER TO MASTER_HOST=‘172.16.1.51‘, MASTER_PORT=3307, MASTER_USER=‘rep‘, MASTER_PASSWORD=‘oldboy123‘; 说明；以上参数均不能有空格
3. MySQL服务无法启动
[root@db01 /]# /data/3306/mysql start MySQL is running... #<==正在运行 [root@db01 /]# ps -ef|grep mysql #<== 并无mysql进程 root 30345 26941 0 22:16 pts/4 00:00:00 grep mysql
原因：其原因是启动脚本里对mysql.sock是否存在做了判断，如果存在mysql.sock，就认为服务运行，这是个bug，解决如下：
[root@db01 /]# rm -f /data/3306/mysql.sock # 说明：删除后重新启动查看即可
4. 当从起或关闭MySQL服务从起或关闭不了，报错如下：
[root@db01 3307]# /data/3307/mysql restart Restarting MySQL... Stoping MySQL... /application/mysql/bin/mysqladmin: connect toserver at ‘localhost‘ failed error: ‘Access denied for user ‘root‘@‘localhost‘(using password: YES)‘ MySQL is running...
原因：是启动文件/data/3306/mysql里面没有修改数据库密码，当我们设置完密码后，在mysql启动文件mysql中也是有密码的，如果不改，就无法停止服务。
[root@db01 /]# vim /data/3306/mysql mysql_pwd="oldboy123"
6. MySQL主从复制更多应用技巧
1.工作中MySQL从库停止复制故障案例
模拟重现故障的能力是运维人员最重要的能力。下面就来次模拟操作。先在从库创建一个库，然后去主库创建同名的库来模拟数据冲突，命令如下：
show slave status；报错：且 show slavestatus\G： Slave_IO_Running：Yes Slave_SQL_Running:NO Seconds_Behind_Master：NULL Last_Error：Error ‘Can‘t create database ‘xiaoliu‘；database exists‘ onquery. Default database：‘xiaoliu‘. Query：‘create database xiaoliu‘
对于该冲突，解决方法1如下：
top slave； #<== 临时停止同步开关 set global sql_slave_skip_counter =1； #<== 将同步指针向下移动一个，如果多次不同步，可以重复操作 start slave； #<== 冲洗你开启 show slave status\G： #<== 再次进行查看确认
如果修改后还会报错，那可以适当的将set global sql_slave_skip_counter值增大即可。
提示：setglobal sql_slave_skip_counter=n；#n取值>0，忽略执行N个更新。
解决方法2：根据可以忽略的错误号事先在配置文件中配置，跳过指定的不影响业务数据的错误，例如：
root@MySQL ~]# grep slave-skip /data/3306/my.cnf slave-skip-errors = 1032，1062，1007
提示：类似由于入库重复导致的失败可以忽略，其他情况是不是可以忽略需要根据不同公司的具体业务来评估。可以查看博客的代码含义
其他可能引起复制故障的原因：
MySQL自身的原因及人为重复插入数据。
不同的数据库版本会引起不同步，低版本到高版本可以，但是高版本不能往低版本同步。
·MySQL的运行错误或程序bug。
·binlog记录模式，例如：row level模式就比默认的语句模式要好。
2. 让MySQL从库记录binlog日志的方法
从库需要记录binlog的应用场景：当前的从库还要作为其他从库的主库，例如级联复制或双主互为主从场景的情况下。下面介绍从库记录binlog日志的方法。
在从库的my.cnf中加入如下参数，然后重启服务生效即可。
log-slave-updates #<== 必须要有这个参数
log-bin = /data/3307/mysql-bin #<==开启从库binlog功能
expire_logs_days = 7 #<==相当于find/data/3307/ -type f -name " my
本文系统来源：http://zhaoyulin.blog.51cto.com/11665101/1862328
内容总结
以上是互联网集市为您收集整理的第五章：MySQL主从复制全部内容，希望文章能够帮你解决第五章：MySQL主从复制所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。
内容备注
版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。
内容手机端
扫描二维码推送至手机访问。