高性能MySql进化论(十四):复制(Replication)
内容导读
互联网集市收集整理的这篇技术教程文章主要介绍了高性能MySql进化论(十四):复制(Replication),小编现在分享给大家,供广大互联网技能从业者学习和参考。文章包含6135字,纯文字阅读大概需要9分钟。
内容图文
![高性能MySql进化论(十四):复制(Replication)](/upload/InfoBanner/zyjiaocheng/1102/e9d28611af864fd6ae678e81d82369bb.jpg)
复制概述
Mysql 内建的复制功能是构建大型,高性能应用程序的基础。将 Mysql 的数据分布到多个系统上去,这种分布的机制,是通过将 Mysql 的某一台主机的 数据复制到其它主机( slaves )上,并重新执行一遍来实现的。复制过程中一个服务器充当主服务器,而一个或多个其它服务器充当从服务器。主服务器将更 新写入二进制日志文件,并维护文件的一个索引以跟踪日志循环。这些日志可以记录发送到从服务器的更新。当一个从服务器连接主服务器时,它通知主服务器从服 务器在日志中读取的最后一次成功更新的位置。从服务器接收从那时起发生的任何更新,然后封锁并等待主服务器通知新的更新。
请注意当你进行复制时,所有对复制中的表的更新必须在主服务器上进行。否则,你必须要小心,以避免用户对主服务器上的表进行的更新与对从服务器上的表所进行的更新之间的冲突。
Mysql 支持的复制类型
(1):基于语句的复制:
在主服务器上执行的
SQL
语句,在从服务器上执行同样的语句。
MySQL
默认采用基于语句的复制,效率比较高。
一旦发现没法精确复制时,
会自动选着基于行的复制。
(2):基于行的复制:把改变的内容复制过去,而不是把命令在从服务器上执行一遍
.
从
mysql5.0
开始支持
(3):混合类型的复制
:
默认采用基于语句的复制,一旦发现基于语句的无法精确的复制时,就会采用基于行的复制。
复制解决的问题
MySQL
复制技术有以下一些特点:
(1)
数据分布
(Data distribution )
(2)
负载平衡
(load balancing)
(3)
备份
(Backups)
(4)
高可用性和容错行
High availability and failover
复制如何工作
整体上来说,复制有 3 个步骤:
(1) master
将改变记录到二进制日志
(binary log)
中(这些记录叫做二进制日志事件,
binary
log events
);
(2) slave
将
master
的
binary log events
拷贝到它的中继日志
(relay
log)
;
(3) slave
重做中继日志中的事件,将改变反映它自己的数据。
下图描述了复制的过程:
该过程的第一部分就是
master
记录二进制日志。在每个事务更新数据完成之前,
master
在二日志记录这些改变。
MySQL
将事务串行的写入二进制日
志,即使事务中的语句都是交叉执行的。在事件写入二进制日志完成后,
master
通知存储引擎提交事务。
下一步就是
slave
将
master
的
binary
log
拷贝到它自己的中继日志。首先,
slave
开始一个工作线程
——I/O
线程。
I/O
线程在
master
上打开一个普通的连接,然后开始
binlog
dump process
。
Binlog dump process
从
master
的二进制日志中读取事件,如果已经跟上
master
,它会睡眠并等待
master
产生新的事件。
I/O
线程将这些事件写入中
继日志。
SQL slave thread
(
SQL
从线程)处理该过程的最后一步。
SQL
线程从中继日志读取事件,并重放其中的事件而更新
slave
的数据,使其与
master
中的数
据一致。只要该线程与
I/O
线程保持一致,中继日志通常会位于
OS
的缓存中,所以中继日志的开销很小。
此外,在
master
中也有一个工作线程:和其它
MySQL
的连接一样,
slave
在
master
中打开一个连接也会使得
master
开始一个线程。复制
过程有一个很重要的限制
——
复制在
slave
上是串行化的,也就是说
master
上的并行更新操作不能在
slave
上并行操作。
复制配置
有两台 MySQL 数据库 服 务器 Master 和 slave , Master 为主服务器, slave 为从服务器,初始状态时, Master 和 slave 中的数据信息相同,当 Master 中的数据发生变化时, slave 也跟着发生相应的变化,使得 master 和 slave 的数据信息同步,达到备份的目的。
要点:
负责在主、从服务器传输各种修改动作的媒介是主服务器的二进制变更日志,这个日志记载着需要传输给从服务器的各种修改动作。因此,主服务器必须激活二进制日志功能。从服务器必须具备足以让它连接主服务器并请求主服务器把二进制变更日志传输给它的权限。
创建复制帐号
1 、在 Master 的数据库中建立一个备份帐户:每个 slave 使用标准的 MySQL 用户名和密码连接 master 。进行复制操作的用户会授予 REPLICATIONSLAVE 权限。用户名的密码都会存储在文本文件 master.info 中
命令如下:
mysql > GRANT REPLICATIONSLAVE,RELOAD,SUPER ON *.* TO backup@‘192.168.43.129‘ IDENTIFIED BY ‘1234‘;
建立一个帐户 backup ,并且只能允许从192.168.43.129这个地址上来登陆,密码是1234。
( 如果因为 mysql 版本新旧密码算法不同,可以设置: set password for ‘backup‘@‘ 192.168.43.129 ‘=old_password(‘1234‘) )
配置master
接下来对 master 进行配置,包括打开二进制日志,指定唯一的 servr ID 。例如,在配置文件加入如下值:
server-id=10 log-bin=mysql-bin
server-id
:为主服务器
A
的
ID
值
log-bin
:二进制变更日值
重启 master ,运行SHOWMASTER STATUS,输出如下:
配置slave
Slave
的配置与
master
类似,你同样需要重启
slave
的
MySQL
。如下:
log_bin = mysql-bin server_id = 2 relay_log = mysql-relay-bin log_slave_updates = 1 read_only = 1
server_id 是必须的,而且唯一。slave没有必要开启二进制日志,但是在一些情况下,必须设置,例如,如果slave为其它slave的master,必须设置 bin_log。在这里,我们开启了二进制日志,而且显示的命名(默认名称为hostname,但是,如果hostname改变则会出现问题)。
relay_log配置中继日志,log_slave_updates表示slave将复制事件写进自己的二进制日志(后面会看到它的用处)。
有些人开启了slave的二进制日志,却没有设置log_slave_updates,然后查看slave的数据是否改变,这是一种错误的配置。所以,尽量使用read_only,它防止改变数据(除了特殊的线程)。但是,read_only并是很实用,特别是那些需要在slave上创建表的应用。
拷贝数据
(假如是你完全新安装 mysql 主从服务器,这个一步就不需要。因为新安装的 master 和 slave 有相同的数据)
拷贝数据大概分为以下几个方法
冷备份
关停 Master 服务器,将 Master 中的数据拷贝到 B 服务器中,使得 Master 和 slave 中的数据同步,这个方法的问题比较明显,需要重启主库服务器
热备份
如果数据库中的表用的都是MYISAM表,可以在主库运行时,使用mysqlhotcopy或者是 rsync来复制数据
使用mysqldump
如果只使用innodb,可以使用下面的命令来执行复制
mysqldump -u root -p --single-transaction --all-databases --add-drop-database --disable-keys --flush-privileges --quick --routines --triggers | mysql -h 192.168.43.129 -u root –p
在复制的过程中如果遇到“ 1130 HY000 ”异常,可参见 http://blog.csdn.net/eric_sunah/article/details/18567091
禁止在 Master 和 slave 服务器中进行写操作,使得两数据库中的数据一定要相同!
启动slave
接 下来就是让 slave 连接 master ,并开始重做 master 二进制日志中的事件。你不应该用配置文件进行该操作,而应该使用 CHANGE MASTER TO 语句,该语句可以完全取代对配置文件的修改,而且它可以为 slave 指定不同的 master ,而不需要停止服务器。如下:
mysql> CHANGE MASTER TO MASTER_HOST=‘server1‘, -> MASTER_USER=‘backup‘, -> MASTER_PASSWORD=‘1234‘, -> MASTER_LOG_FILE=‘mysql-bin.000001‘, -> MASTER_LOG_POS=0;
MASTER_LOG_POS 的值为 0 ,因为它是日志的开始位置。
你可以用 SHOW SLAVE STATUS 语句查看 slave 的设置是否正确:
mysql> SHOW SLAVE STATUS\G
*************************** 1. row***************************
Slave_IO_State:
Master_Host: server1
Master_User: repl
Master_Port: 3306
Connect_Retry: 60
Master_Log_File:mysql-bin.000001
Read_Master_Log_Pos:4
Relay_Log_File:mysql-relay-bin.000001
Relay_Log_Pos: 4
Relay_Master_Log_File:mysql-bin.000001
Slave_IO_Running:No
Slave_SQL_Running:No
...omitted...
Seconds_Behind_Master:NULL
Slave_IO_State,Slave_IO_Running, 和 Slave_SQL_Running 是 No表明 slave 还没有开始复制过程。日志的位置为 4 而不是 0 ,这是因为 0 只是日志文件的开始位置,并不是日志位置。实际上, MySQL 知道的第一个事件的位置是 4 。
为了开始复制,你可以运行:
mysql>START SLAVE;
运行 SHOW SLAVE STATUS 查看输出结果:
mysql>SHOW SLAVE STATUS\G
*************************** 1. row***************************
Slave_IO_State:Waiting for master to send event
Master_Host: server1
Master_User: repl
Master_Port: 3306
Connect_Retry: 60
Master_Log_File:mysql-bin.000001
Read_Master_Log_Pos:164
Relay_Log_File:mysql-relay-bin.000001
Relay_Log_Pos: 164
Relay_Master_Log_File:mysql-bin.000001
Slave_IO_Running:Yes
Slave_SQL_Running:Yes
...omitted...
Seconds_Behind_Master:0
在这里主要是看
:
Slave_IO_Running=Yes
Slave_SQL_Running=Yes
slave 的 I/O 和 SQL 线程都已经开始运行,而且 Seconds_Behind_Master 不再是 NULL 。日志的位置增加了,意味着一些事件被获取并执行了。如果你在 master 上进行修改,你可以在 slave 上看到各种日志文件的位置的变化,同样,你也可以看到数据库中数据的变化。
你可查看 master 和 slave 上线程的状态。在 master 上,你可以看到 slave 的 I/O 线程创建的连接:
在 master 上输入 show processlist\G;
mysql> show processlist \G *************************** 1. row *************************** Id: 1 User: root Host: localhost:2096 db: test Command: Query Time: 0 State: NULL Info: show processlist *************************** 2. row *************************** Id: 2 User: repl Host: localhost:2144 db: NULL Command: Binlog Dump Time: 1838 State: Has sent all binlog to slave; waiting for binlog to be updated Info: NULL 2 rows in set (0.00 sec) |
行 2 为处理 slave 的 I/O 线程的连接。
在 slave 服务器上运行该语句:
mysql> show processlist \G *************************** 1. row *************************** Id: 1 User: system user Host: db: NULL Command: Connect Time: 2291 State: Waiting for master to send event |
原文:http://blog.csdn.net/eric_sunah/article/details/18628511
内容总结
以上是互联网集市为您收集整理的高性能MySql进化论(十四):复制(Replication)全部内容,希望文章能够帮你解决高性能MySql进化论(十四):复制(Replication)所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错,欢迎将互联网集市网站推荐给程序员好友。
内容备注
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 gblab@vip.qq.com 举报,一经查实,本站将立刻删除。
内容手机端
扫描二维码推送至手机访问。