场景：主库DB：utf8字符集备库DB：gbk字符集需求：校验主备数据是否一致，并且修复 校验过程：设置主库连接为utf8，设置备库连接为gbk，分别进行查询，将返回的的结果集按记录逐字段比较。显示结果：原本相同的汉字字符，数据校验认为不一致。 原因分析：对于主库而已，由于建立连接的字符集为UTF8，则返回的汉字字符编码为UTF8格式；对于备库而言则是GBK格式，而程序中通过字符串比较函数strcasecmp进行比较，显然不同的字符集编码...
场景：主库DB：utf8字符集备库DB：gbk字符集需求：校验主备数据是否一致，并且修复校验过程：设置主库连接为utf8，设置备库连接为gbk，分别进行查询，将返回的的结果集按记录逐字段比较。显示结果：原本相同的汉字字符，数据校验认为不一致。原因分析：对于主库而已，由于建立连接的字符集为UTF8，则返回的汉字字符编码为UTF8格式；对于备库而言则是GBK格式，而程序中通过字符串比较函数strcasecmp进行比较，显然不同的字符集编码，...
场景：主库DB：utf8字符集备库DB：gbk字符集需求：校验主备数据是否一致，并且修复校验过程：设置主库连接为utf8，设置备库连接为gbk，分别进行查询，将返回的的结果集按记录逐字段比较。显示结果：原本相同的汉字字符，数据校验认为不一致。原因分析：对于主库而已，由于建立连接的字符集为UTF8，则返回的汉字字符编码为UTF8格式；对于备库而言则是GBK格式，而程序中通过字符串比较函数strcasecmp进行比较，显然不同的字符集编码，...
场景：主库DB：utf8字符集备库DB：gbk字符集 需求：校验主备数据是否一致，并且修复 校验过程：设置主库连接为utf8，设置备库连接为gbk，分别进行查询，将返回的的结果集按记录逐字段比较。 显示结果：原本相同的汉字字符，数据校验认为不一致。 原因分析：对于主库而已，由于建立连接的字符集为UTF8，则返回的汉字字符编码为UTF8格式；对于备库而言则是GBK格式，而程序中通过字符串比较函数strcasecmp进行比较，显然不同的字符集编...
1. checksum table. checksum table 会对表一行一行进行计算，直到计算出最终的 checksum 结果。比如对表 n4 进行校验（记录数 157W，大小为 4G） [ytt]>desc n4;+-------+--------------+------+-----+---------+-------+| Field | Type | Null | Key | Default | Extra |+-------+--------------+------+-----+---------+-------+| id | int(11) | YES | | NULL | || r1 | char(36) | YES | | NULL | || r2 | varchar(100) | YES...
主从数据校验 维度：1个月对现网数据做一次数据校验如果发生主从切换，当天要做一次数据校验 校验工具：pt-table-checksum 修复工具：pt-table-sync pt-table-checksum 原理 在数据库创建表： checksums 每次取count(*) where id > 0 and id <= 1000 数据(this_cnt),做hash_code运算（this_crc） 主库：select count(*) from tb where id > 0 and id <= 1000; 主从分别执行函数，生成各自的cnt,crc的值 set binlog_format ...
一、GTID主从复制原理及相关概念：1、GTID简介：GTID：Global Transaction ID，全局事务ID，是一个已提交事务的编号，并且是一个全局唯一的编号。MySQL 5.6版本之后在主从复制类型上新增了GTID复制。通过GTID保证了每个在master节点上提交的事务在集群中有一个唯一的ID，这种方式强化了数据库的主从一致性、故障恢复及容错能力。2、GTID工作原理：GTID用于在binlog中唯一标识一个事务。当事务提交时，MySQL在写binlog时，会先写一个...