Linux下基于GTID的Mysql主从数据库的复制(mysql版本:mysql-5.7.24)——异步复制

续我的上篇博文:https://mp.csdn.net/postedit/87894362

主从复制存在的问题以及解决办法

问题:

1.主库宕机之后,数据可能会丢失
2.从库只有一个sql Thread,主库写压力大,复制很可能延时

解决方法:

1.半同步复制--解决数据丢失的问题
2.并行复制--解决从库复制延时的问题
1.数据库同步是怎样进行的? 
master用户写入数据,生成event记到binary log中. 
slave接收master上传来的binlog,然后按顺序应用,重现master上的用户操作。 
2.数据库是靠什么同步的? 主从复制,默认是通过pos复制(postion),就是说在日志文档里,将用户进行的每一项操作都进行编号(pos),每一个event都有一个起始编号,一个终止编号,我们在配置主从复制时从节点时,要输入master的log_pos值就是这个原因,要求它从哪个pos开始同步数据库里的数据,这也是传统复制技术, 
MySQL5.6增加了GTID复制,GTID就是类似于pos的一个作用,不过它是整个mysql复制架构全局通用的,就是说在这整个mysql冗余架构中,它们的日志文件里事件的GTID值是一致的. 
3.从节点怎么知道要从哪块进行同步? 上面也说了,一开始是自己设置的从节点从主节点的日志文件里的pos开始复制,以后就自己去读取上一次同步到哪一块,接着同步. 
4:pos与GTID有什么区别? 两者都是日志文件里事件的一个标志,如果将整个mysql集群看作一个整体,pos就是局部的,GTID就是全局的。

一.GTID的概念

 

1、全局事务标识:global transaction identifiers。
2、GTID是一个事务一一对应,并且全局唯一ID。
3、一个GTID在一个服务器上只执行一次,避免重复执行导致数据混乱或者主从不一致。
4、GTID用来代替传统复制方法,不再使用MASTER_LOG_FILE+MASTER_LOG_POS开启复制。而是使用MASTER_AUTO_POSTION=1的方式开始复制。
5、MySQL-5.6.5开始支持的,MySQL-5.6.10后开始完善。

二.GTID的组成

GTID = source_id:transaction_id
source_id,用于鉴别原服务器,即mysql服务器唯一的的server_uuid,由于GTID会传递到slave,所以也可以理解为源ID。
transaction_id,为当前服务器上已提交事务的一个序列号,通常从1开始自增长的序列,一个数值对应一个事务。
#示例:
3E11FA47-71CA-11E1-9E33-C80AA9429562:23
前面的一串为服务器的server_uuid,即3E11FA47-71CA-11E1-9E33-C80AA9429562,后面的23为transaction_id

三.GTID的优势

1、更简单的实现failover,不用以前那样在需要找log_file和log_pos。
2、更简单的搭建主从复制。
3、比传统的复制更加安全。
4、GTID是连续的没有空洞的,保证数据的一致性,零丢失
5、借助GTID,在发生主备切换的情况下,MySQL的其它Slave可以自动在新主上找到正确的复制位置,这大大简化了复杂复制拓扑下集群的维护,也减少了人为设置复制位置发生误操作的风险。另外,基于GTID的复制可以忽略已经执行过的事务,减少了数据发生不一致的风险。

四.GTID的工作原理

1、当一个事务在主库端执行并提交时,产生GTID,一同记录到binlog日志中。
2、binlog传输到slave,并存储到slave的relaylog后,读取这个GTID的这个值设置gtid_next变量,即告诉Slave,下一个要执行的GTID值。
3、sql线程从relay log中获取GTID,然后对比slave端的binlog是否有该GTID。
4、如果有记录,说明该GTID的事务已经执行,slave会忽略。
5、如果没有记录,slave就会执行该GTID事务,并记录该GTID到自身的binlog,
在读取执行事务前会先检查其他session持有该GTID,确保不被重复执行。
6、在解析过程中会判断是否有主键,如果没有就用二级索引,如果没有就用全部扫描。

五.配置GTID

配置server1(主库)

1.修改配置文件(/etc/my.cnf)并重启mysql

[root@server1 mysql]# vim /etc/my.cnf       
log-bin=mysql-bin       #启动mysql二进制日志,即数据同步语句,从数据库会一条一条的执行这些语句
server-id=1             #服务器唯一标识
gtid_mode=ON                   #开启gtid模式
enforce-gtid-consistency=true  #强制gtid一致性,开启后对于特定create table不被支持
[root@server1 mysql]# systemctl restart mysqld     #修改完配置文件之后,重启mysqld服务

2.查看主库状态

[root@server1 ~]# mysql -uroot -pXinjiaojiao+523
mysql> show master status;     #查看主库的状态


配置server2(从库)

1.修改配置文件(/etc/my.cnf)并重启mysql

[root@server2 ~]# vim /etc/my.cnf         #将上次做的主从复制的一行注释,在最后加入下面两行内容    
server-id=2            #服务器唯一标识
#开启gtid模块  
gtid_mode=ON                      #开启gtid模式
enforce-gtid-consistency=true     #强制gtid一致性,开启后对于特定create table不被支持
[root@server2 ~]# systemctl restart mysqld     #修改完配置文件之后,重启mysqld服务

2.设定从库,将主库与从库连接起来,并开启从库

[root@server2 ~]# mysql -uroot -pXinjiaojiao+623         #登录server2(从库)自己的数据库进行设置
mysql> stop slave;        #先关闭slave(在change之前要关闭slave)
mysql> change master to master_host='172.25.83.1',master_user='xin',master_password='Xinjiaojiao+523', master_auto_position=1;
mysql> start slave;
mysql> show slave status\G;

3.查看从库状态

下图记录了gtid的变化

如果Slave_IO_Running和Slave_SQL_Running都为yes,则表示正常

测试:

1.在主库端的数据库westos下的表usertb中,插入信息

[root@server1 ~]# mysql -uroot -pXinjiaojiao+523

在主库上查看gtid号的改变


2.从库端查看是否存在在主库中添加的内容

[root@server2 ~]# mysql -uroot -pXinjiaojiao+623

此时可以在从库上查看gtid号码的改变。

结论:

从库看到的数据和主库看到的数据是一致的,代表基于gtid的主从复制搭建成功

猜你喜欢

转载自blog.csdn.net/qq_42303254/article/details/87896993