首先看一下什么是GTID:
GTID(Global Transaction ID)是对于一个已提交事务的编号,并且是一个全局唯一的编号。
GTID实际上是由UUID+TID组成的。其中UUID是一个MySQL实例的唯一标识。TID代表了该实例上已经提交的事务数量,并且随着事务提交单调递增。根据GTID可以知道事务最初是在哪个实例上提交的,而且方便故障切换。
 
接下来就看一下怎么在GTID模式下快速的添加一个slave:
我们知道在没有GTID复制以前,MySQL的复制是基于binary log和position来做的,之前的复制我们要执行下面的change语句:
  1. CHANGE MASTER TO MASTER_HOST='',MASTER_PORT=3306,MASTER_USER='repl',MASTER_PASSWORD='*****',MASTER_LOG_FILE='mysqlbinlog.000003',MASTER_LOG_POS=99721204;
而我们在GTID就可以执行以下的change语句:
  1. CHANGE MASTER TO MASTER_HOST='****', MASTER_USER='repl', MASTER_PASSWORD='******', MASTER_PORT=3306, master_auto_position=1;
我们可以看到,基本上来说指定复制的时候原来的binary log方式需要指定MASTER_LOG_FILE和MASTER_LOG_POS,而GTID复制却不需要知道这些参数。
下面看一下怎么在GTID的模式下创建主从复制:
从上面可以看得到,在GTID的模式下我们不再需要知道MASTER_LOG_FILE和MASTER_LOG_POS两个参数,相比之下我们只需要指定master就可以了,这对于创建复制来说简单的多了。在GTID的模式下我们需要知道以下两个全局变量:
  1. root@perconatest09:23:44>show global variables like 'GTID_%'\G
  2. *************************** 1. row ***************************
  3. Variable_name: gtid_executed
  4. Value: 5031589f-3551-11e7-89a0-00505693235d:1-12,
  5. 806ede0c-357e-11e7-9719-00505693235d:1-11,
  6. a38c33ee-34b7-11e7-ae1d-005056931959:1-24
  7. *************************** 2. row ***************************
  8. Variable_name: gtid_executed_compression_period
  9. Value: 1000
  10. *************************** 3. row ***************************
  11. Variable_name: gtid_mode
  12. Value: ON
  13. *************************** 4. row ***************************
  14. Variable_name: gtid_owned
  15. Value:
  16. *************************** 5. row ***************************
  17. Variable_name: gtid_purged
  18. Value: 5031589f-3551-11e7-89a0-00505693235d:1-12,
  19. 806ede0c-357e-11e7-9719-00505693235d:1-11,
  20. a38c33ee-34b7-11e7-ae1d-005056931959:1-12
我们主要需要看到的就是gtid_executed和gtid_purged两个参数,
gtid_executed:这个是已经执行过的所有的事物的GTID的一个系列串,也就是binary log里面已经落盘的事物的序列号。这个参数是只读的,不能够进行设置。
gtid_purged:这个序列是指我们在binary log删除的事物的GTID的序列号。我们可以手动进行设置,方便我们做一些管理。
这两个参数理解以后,接下来我们看一下怎样去添加一个GTID复制的从库:
(1):从主库做一个全备份,而且要记录主库备份时间点的gtid_executed
(2):从库进行恢复,而且将从库的gtid_purged设置为我们第一步获取的master的gtid_executed
(3):执行CHANGE MASTER 语句。
我们使用mysqldump就可以将主库进行备份,并且将备份还原到一台新的机器作为从库。在执行之前先在主库看一下参数:
  1. root@perconatest09:23:58>show global variables like 'GTID_e%'\G
  2. *************************** 1. row ***************************
  3. Variable_name: gtid_executed
  4. Value: 5031589f-3551-11e7-89a0-00505693235d:1-12,
  5. 806ede0c-357e-11e7-9719-00505693235d:1-11,
  6. a38c33ee-34b7-11e7-ae1d-005056931959:1-24
  7. 2 rows in set (0.01 sec)
  8. root@perconatest09:41:33>show global variables like 'GTID_p%'\G
  9. *************************** 1. row ***************************
  10. Variable_name: gtid_purged
  11. Value: 5031589f-3551-11e7-89a0-00505693235d:1-12,
  12. 806ede0c-357e-11e7-9719-00505693235d:1-11,
  13. a38c33ee-34b7-11e7-ae1d-005056931959:1-12
  14. 1 row in set (0.01 sec)
然后在主库进行备份:
  1.  
  1.  mysqldump -uroot -p --set-gtid-purged=off --single-transaction --triggers --routines --all-databases> /home/sa/backup.sql
  1.  
我们可以看一下备份文件:
  1. [root@localhost sa]# head -30 backup.sql
我们能够看到有以下的参数:
  1. SET @@GLOBAL.GTID_PURGED='5031589f-3551-11e7-89a0-00505693235d:1-12,
  2. 806ede0c-357e-11e7-9719-00505693235d:1-11,
  3. a38c33ee-34b7-11e7-ae1d-005056931959:1-24';
也就是说当我们进行恢复的时候,是会自动设置GTID_PURGED的,而这个值刚好就是master的gtid_executed,所以我们从库恢复以后基本上就不需要在做指定了。
进入从库恢复数据:
source backup.sql;
我们知道已经不需要在指定GTID_PURGE的值了,要是不确定还可以确认一下:
  1. show global variables like 'gtid_executed';
  2. show global variables like 'gtid_purged';
后面直接指定复制就好了:
  1. CHANGE MASTER TO MASTER_HOST="***", MASTER_USER="root", MASTER_PASSWORD="*****", MASTER_PORT=3306, MASTER_AUTO_POSITION = 1;
将*替换为你需要指定的主库的相关信息就OK了。
 
GTID主从复制的模式下如果出现错误,我们该怎么恢复呢?
假如我们的主库的日志已经purged,执行了reset等操作,我们从库会有如下报错:
  1. Last_IO_Error: Got fatal error 1236 from master when reading data from binary log: 'The slave is connecting using CHANGE MASTER TO MASTER_AUTO_POSITION = 1, but the master has purged binary logs containing GTIDs that the slave requires.'

提示我们找不到日志,主从复制就会停掉,下面我们看一下处理方式:

(1)主库执行以下操作:
  1. root@perconatest09:41:38>show global variables like 'GTID_EXECUTED';
  2. +---------------+---------------------------------------------------------------------------------------------------------------------------------+
  3. | Variable_name | Value |
  4. +---------------+---------------------------------------------------------------------------------------------------------------------------------+
  5. | gtid_executed | 5031589f-3551-11e7-89a0-00505693235d:1-12,
  6. 806ede0c-357e-11e7-9719-00505693235d:1-11,
  7. a38c33ee-34b7-11e7-ae1d-005056931959:1-24 |
  8. +---------------+---------------------------------------------------------------------------------------------------------------------------------+
  9. 1 row in set (0.01 sec)
(2)从库
  1. root@(none)03:04:49>set global GTID_PURGED='5031589f-3551-11e7-89a0-00505693235d:1-12,806ede0c-357e-11e7-9719-00505693235d:1-11,a38c33ee-34b7-11e7-ae1d-005056931959:1-24';
注意,在指定前首先要确认这个值是空的,不然我们要做以下操作:
  1. root@(none)03:04:49>reset master;
  2. root@(none)03:04:49>set global GTID_PURGED='5031589f-3551-11e7-89a0-00505693235d:1-12,806ede0c-357e-11e7-9719-00505693235d:1-11,a38c33ee-34b7-11e7-ae1d-005056931959:1-24';
  3. root@(none)03:04:49>start slave;
  4. root@(none)03:04:49>show slave status\G
这样修复就完成了,但是我们最好还是用checksum校验一下主从数据的一致性。
报错信息:
Got fatal error 1236 from master when reading data from binary log: ‘The slave is connecting using CHANGE MASTER TO MASTER_AUTO_POSITION = 1, but the master has purged binary logs containing GTIDs that the slave requires
(贴个错误信息为了增加浏览量)
当然上面的方法并不能保证数据的完全一致性,我们还要去校验使用 pt-table-checksum and pt-table-sync,但是这样效率不一定是最高的,最好的方式还是通过前面介绍的,做全备份,然后恢复,再指定master,这才是最靠谱的。

GTID复制的搭建和问题处理的更多相关文章

  1. 转 GTID复制的搭建和问题处理

    ########sample 1: 了解mysqldump 和 mysqlbackup  和 gtid_executed 和 gtid_purged https://www.linuxidc.com/ ...

  2. mysql之 mysql 5.6不停机主从搭建(一主一从基于GTID复制)

    环境说明:版本 version 5.6.25-log 主库ip: 10.219.24.25从库ip:10.219.24.22os 版本: centos 6.7已安装热备软件:xtrabackup 防火 ...

  3. Mysql基于GTID复制模式-运维小结 (完整篇)

    先来看mysql5.6主从同步操作时遇到的一个报错:mysql> change master to master_host='192.168.10.59',master_user='repli' ...

  4. MHA-手动Failover流程(传统复制&GTID复制)

    本文仅梳理手动Failover流程.MHA的介绍详见:MySQL高可用架构之MHA 一.基本环境 1.1.复制结构 VMware10.0+CentOS6.9+MySQL5.7.21 ROLE HOST ...

  5. MHA集群(gtid复制)和vip漂移

    在上一片博客中,讲述了怎么去配置MHA架构!这片博客不再细说,只说明其中MySQL主从搭建,这里使用的是gtid加上半同步复制! 步骤与上一片博客一样,不同之处在于MySQL主从的搭建!详细的gtid ...

  6. MySQL 5.7.17 Group Relication(组复制)搭建手册【转】

    本博文介绍了Group Replication的两种工作模式的架构.并详细介绍了Single-Master Mode的部署过程,以及如何切换到Multi-Master Mode.当然,文末给出了Gro ...

  7. MySQL的GTID复制

    从mysql5.6开始引入全局事务标识符(GTID),即每个事务都有一个唯一的标识符.服务器上的每个事务都被分配一个唯一的事务标识符,这是一个64位非零的数值,根据事务提交的顺序分配.GTID的构成是 ...

  8. MySQL半同步复制的搭建和配置原理

    半同步复制: 什么是半同步复制?我们知道在默认情况下,MySQL的复制是异步的,这意味着主服务器及其从服务器是独立的.异步复制可以提供最佳的性能,因为主服务器在将更新的数据写入它的二进制日志(Binl ...

  9. MySQL的GTID复制与传统复制的相互切换

    MySQL的GTID复制与传统复制的相互转换 1. GTID复制转换成传统复制 1.1 环境准备 1.2 停止slave 1.3 查看当前主从状态 1.4 change master 1.5 启动主从 ...

随机推荐

  1. CSAPP阅读笔记-汇编语言初探(数据传送类指令)-来自第三章3.2-3.3的笔记-P115-P128

    1.如何由机器代码生成汇编代码? objdump -d再加上文件名即可直接在终端看到由反汇编器恢复的汇编代码.注意,文件名并不一定得是.o文件,任何可执行文件都可以. 结果如下: 仅列举了反汇编tes ...

  2. Centos 7.0设置/etc/rc.local无效问题解决

    安装centos7以后按照以往习惯修改rc.local添加开机启动命令,但重启后发现无效,再次重启发现依然如故 检查系统rc.local服务运行情况 systemctl | grep "rc ...

  3. Linux下安装jdk1.6

    Linux中JDK1.6的安装和配置方法 一.安装 创建安装目录,在/usr/java下建立安装路径,并将文件考到该路径下: mkdir /usr/java 1.jdk-6u11-linux-i586 ...

  4. 二叉树链表C++实现

    结点的构造 源代码:https://github.com/cjy513203427/C_Program_Base/tree/master/57.%E4%BA%8C%E5%8F%89%E6%A0%91% ...

  5. .netCore2.0 WebApi 传递form表单

    随着it的技术发展,目前越来越多的项目采用前后端分离的开发模式,通过webapi提供接口数据来进行交互 最近项目用的是.netCore WebApi,在最近的项目使用中发现一些问题,进行记录.个人简介 ...

  6. C#操作Redis SortedSet 有序集合

    /// <summary> /// Redis 有序集合 /// </summary> public static void Redis_SetSorted() { Redis ...

  7. django常用封装

    #encoding:utf-8from django.shortcuts import render_to_responseimport hashlibfrom binascii import b2a ...

  8. springboot伪静态

    在日常网站访问中,会把动态地址改造成伪静态地址. 例如: 访问新闻栏目 /col/1/,这是原有地址,如果这样访问,不利于搜索引擎检索收录,同时安全性也不是很好. 改造之后: /col/1.html. ...

  9. java时间工具类

    在项目中,很多地方需要根据时间获取相应的数据,将时间格式化,或者时间比较等相关操作.一个良好的工具类不仅可以减少代码冗余,还能促进业务处理,加快进度. /** * @author: lxw * @Da ...

  10. mysql存储过程优化

    示例 WHILE s <> 1 DO select xxx; insert into xxx; END WHILE; 执行耗时27秒 优化点1: 添加事物 START TRANSACTIO ...