搜公众号
推荐 原创 视频 Java开发 开发工具 Python开发 Kotlin开发 Ruby开发 .NET开发 服务器运维 开放平台 架构师 大数据 云计算 人工智能 开发语言 其它开发 iOS开发 前端开发 JavaScript开发 Android开发 PHP开发 数据库
Lambda在线 > 恩墨学院 > 例证MySQL GTID与MariaDB GTID的不同之处

例证MySQL GTID与MariaDB GTID的不同之处

恩墨学院 2018-11-04
举报

关注获得更多内容

精彩预告:第八届数据技术嘉年华大会将于2018年11月16日~17日北京市富力万丽酒店盛大开启。本次大会围绕数据、智能、链接组织前沿议题,倡导以智能智慧算法应用,发掘数据价值,以技术将企业链接到未来的战略制高点


福利

点击“原文链接”查看大会详情。



GTID是全称是Global Transaction Identifier,可简化MySQL的主从切换以及Failover。GTID用于在binlog中唯一标识一个事务。当事务提交时,MySQL Server在写binlog的时候,会先写一个特殊的Binlog Event,类型为GTID_Event,指定下一个事务的GTID,然后再写事务的Binlog。主从同步时GTID_Event和事务的Binlog都会传递到从库,从库在执行的时候也是用同样的GTID写binlog,这样主从同步以后,就可通过GTID确定从库同步到的位置了。


在MySQL 5.6 中,数据库服务器上的每个事务都会被分配一个唯一的事务标示符,它是一个64位非零数值,根据事务提交的顺序分配。GTID有两部分。 第一部分是指服务器UUID。 此UUID是32个字符的随机字符串。 该值取自位于mysql数据目录中的auto.cnf文件。 第二部分是序列。

例如:

 

例证MySQL GTID与MariaDB GTID的不同之处


在从库上,GTID是单个表达式:

fba30f4d-5815-11e8-9beb-000c2900351f:10

 

需要了解的是,如果事务从 master 复制到了 slave 端,事务的二进制位置会发生改变,这是由于在 slave 端需要将事务写入到 slave 自己的二进制日志里面,那所写位置是不一样的,但是全局事务标识符是一样的。

 

对于GTID的参数

例证MySQL GTID与MariaDB GTID的不同之处

 

  • l gtid_executed会记录当前执行的GTID的 UUID,在MySQL 5.6中必须配置参数log_slave_updates的最重要原因在于当slave重启后,无法得知当前slave已经运行到的GTID位置,因为变量gtid_executed是一个内存值。

  • l gtid_mode用于控制开启/关闭GTID模式。

  • l gtid_owned是一个只读变量,其内容取决于它的范围。 当与session会话级一起使用时,该列表包含此客户端拥有的所有GTID; 当与global 级一起使用时,它包含所有GTID及其所有者的列表。

  • l gtid_purged,表示被purge掉的GTID集合

  

示例:

例证MySQL GTID与MariaDB GTID的不同之处

查看binlog

/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;

/*!40019 SET @@session.max_insert_delayed_threads=0*/;

/*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;

DELIMITER /*!*/;

# at 4

#181009 23:02:36 server id 1  end_log_pos 120 CRC32 0x07eff3b3  Start: binlog v 4, server v 5.6.40-log created 181009 23:02:36 at startup

# Warning: this binlog is either in use or was not closed properly.

ROLLBACK/*!*/;

# at 120

#181009 23:02:36 server id 1  end_log_pos 151 CRC32 0xb62fd2d2  Previous-GTIDs

# [empty]

# at 151

#181010  4:37:11 server id 1  end_log_pos 199 CRC32 0x2f451f69  GTID [commit=yes]

SET @@SESSION.GTID_NEXT= 'fba30f4d-5815-11e8-9beb-000c2900351f:1'/*!*/;

# at 199

#181010  4:37:11 server id 1  end_log_pos 271 CRC32 0xa6b6773e  Query   thread_id=5     exec_time=0     error_code=0

SET TIMESTAMP=1539160631/*!*/;

SET @@session.pseudo_thread_id=5/*!*/;

SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/;

SET @@session.sql_mode=1075838976/*!*/;

SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;

/*!\C utf8 *//*!*/;

SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=8/*!*/;

SET @@session.lc_time_names=0/*!*/;

SET @@session.collation_database=DEFAULT/*!*/;

BEGIN

/*!*/;

# at 271

#181010  4:37:11 server id 1  end_log_pos 336 CRC32 0x0f828e75  Table_map: `test`.`tx_albert` mapped to number 75

# at 336

#181010  4:37:11 server id 1  end_log_pos 398 CRC32 0xd023df0a  Write_rows: table id 75 flags: STMT_END_F

### INSERT INTO `test`.`tx_albert`

### SET

###   @1=3

###   @2='enmo'

###   @3=5

###   @4='F'

###   @5='BeiJing'

###   @6='BJ'

# at 398

#181010  4:37:11 server id 1  end_log_pos 429 CRC32 0x7117fe15  Xid = 45

COMMIT/*!*/;

# at 429

#181010  4:38:24 server id 1  end_log_pos 477 CRC32 0x8b8da3af  GTID [commit=yes]

SET @@SESSION.GTID_NEXT= 'fba30f4d-5815-11e8-9beb-000c2900351f:2'/*!*/;

# at 477

#181010  4:38:24 server id 1  end_log_pos 549 CRC32 0xe2c69fee  Query   thread_id=5     exec_time=0     error_code=0

SET TIMESTAMP=1539160704/*!*/;

BEGIN

/*!*/;

# at 549

#181010  4:38:24 server id 1  end_log_pos 614 CRC32 0xa52a4212  Table_map: `test`.`tx_albert` mapped to number 75

# at 614

#181010  4:38:24 server id 1  end_log_pos 676 CRC32 0x12c7c08f  Write_rows: table id 75 flags: STMT_END_F

### INSERT INTO `test`.`tx_albert`

### SET

###   @1=4

###   @2='sed'

###   @3=34

###   @4='M'

###   @5='GuiYang'

###   @6='DBA'

# at 676

#181010  4:38:24 server id 1  end_log_pos 707 CRC32 0xab6aa483  Xid = 46

COMMIT/*!*/;

SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog *//*!*/;

DELIMITER ;

# End of log file

 

SET @@SESSION.GTID_NEXT= 'fba30f4d-5815-11e8-9beb-000c2900351f:1'/*!*/;

 

其中'fba30f4d-5815-11e8-9beb-000c2900351f' 是server UUID,‘1’ 是sequence ,即提交的序列

 

#181010  4:37:11 server id 1  end_log_pos 429 CRC32 0x7117fe15  Xid = 45

 

Xid = 45 表示下一个sequence。

 

MySQL通过全局变量gtid_mode控制开启/关闭GTID模式。但是gtid_mode是只读的,可添加到配置文件中,然后重启mysqld来开启GTID模式。由于GTID需要写入到二进制日志,所以要使用了GTID,同时也需要把二进制日志启用。相关配置项如下:

例证MySQL GTID与MariaDB GTID的不同之处

 

MariaDB 数据库作为是 MySQL 的一个分支,在某些特性上与 MySQL相同。MariaDB是完全兼容MySQL,包括API和命令行,同时在存储引擎方面,它使用XtraDB作为MySQL InnoDB的替代品,而XtraDB 也能兼容着 InnoDB。


GTID复制是出现在MariaDB 10版中,它由The Domain ID,server ID,事务序列号组成。在MariaDB 10版中默认是开启GTID复制模式,每个 Event Group 写到 Binlog 时会先收到一个GTID_EVENT,用MariaDB的 mysqlbinlog 工具或者 SHOW BINLOG EVENTS 命令可以看到这个Event。同时在MariaDB 10版无需设置GTID任何参数,更不需像MySQL 5.6 那样,需要在slave上设置log_slave_updates=1(这样会增加slave的I/O压力)。


MariaDB 支持热切换GTID,不像MySQL5.6/5.7 版本一样,修改GTID 模式需要修改相应的GTID 参数,并需要重启。

示例:

CHANGE MASTER TO master_use_gtid = { slave_pos | current_pos | no }


  • l slave_pos,是将把Slave配置为使用 GTID 方式。当Slave连接到Master时,Master将从最后一个GTID开始给Slave复制 Binlog

  • l current_pos,该设置无需知道当前实例是否是Master还是Slave,但是对于slave来说,如果存在于复制无关的其他事务,可能会引起复制的错误。当然可以在slave 上设置@@GLOBAL.gtid_strict_mode=1,即开启GTID严格模式。

  • l no,也即是传统的复制模式

 

查看slave 复制情况:

MariaDB [(none)]> show slave status\G show processlist;

*************************** 1. row ***************************

               Slave_IO_State: Waiting for master to send event

                  Master_Host: 192.168.1.34

                  Master_User: repl

                  Master_Port: 3306

                Connect_Retry: 60

              Master_Log_File: mariadb-bin.000002

          Read_Master_Log_Pos: 993

               Relay_Log_File: mariadb-relay-bin.000002

                Relay_Log_Pos: 644

        Relay_Master_Log_File: mariadb-bin.000002

             Slave_IO_Running: Yes

            Slave_SQL_Running: Yes

              Replicate_Do_DB:

          Replicate_Ignore_DB:

           Replicate_Do_Table:

       Replicate_Ignore_Table:

      Replicate_Wild_Do_Table:

  Replicate_Wild_Ignore_Table:

                   Last_Errno: 0

                   Last_Error:

                 Skip_Counter: 0

          Exec_Master_Log_Pos: 993

              Relay_Log_Space: 944

              Until_Condition: None

               Until_Log_File:

                Until_Log_Pos: 0

           Master_SSL_Allowed: No

           Master_SSL_CA_File:

           Master_SSL_CA_Path:

              Master_SSL_Cert:

            Master_SSL_Cipher:

               Master_SSL_Key:

        Seconds_Behind_Master: 0

Master_SSL_Verify_Server_Cert: No

                Last_IO_Errno: 0

                Last_IO_Error:

               Last_SQL_Errno: 0

               Last_SQL_Error:

  Replicate_Ignore_Server_Ids:

             Master_Server_Id: 1000

               Master_SSL_Crl:

           Master_SSL_Crlpath:

                   Using_Gtid: Slave_Pos

                  Gtid_IO_Pos: 0-1000-4

      Replicate_Do_Domain_Ids:

  Replicate_Ignore_Domain_Ids:

                Parallel_Mode: conservative

1 row in set (0.00 sec) 

例证MySQL GTID与MariaDB GTID的不同之处

 

可以看到当前slave使用的GTID 传输为Using_Gtid: Slave_Pos,获取到的pos位置为0-1000-4。

“0”,第一位是Domain ID,这是一个32位的无符号整型;

“ 1000”,第二位是Server ID,这跟传统的主备复制中 Server ID 的含义是一样的,也是一个32位无符号整型。因此在一个复制拓扑中每个实例的Server ID必须是唯一的;

“4”,第三位是事务序列号(Sequence Number)。这是一个64位的无符号整型。每个新产生的 Event Group 记录到Binlog时都会新生成一个单调递增的序列号

 

备注:MariaDB 10.0/10.1的GTID复制与MySQL 5.6/5.7 不兼容。

 

参阅:https://mariadb.com/kb/en/mariadb/mariadb-vs-mysql-compatibility

 



近期文章





?


版权声明:本站内容全部来自于腾讯微信公众号,属第三方自助推荐收录。《例证MySQL GTID与MariaDB GTID的不同之处》的版权归原作者「恩墨学院」所有,文章言论观点不代表Lambda在线的观点, Lambda在线不承担任何法律责任。如需删除可联系QQ:516101458

文章来源: 阅读原文

相关阅读

举报