msyql之主从同步的部署

当单台 MYSQL 服务器无法满足当前网站流量时的优化方案。需要搭建 mysql 集群技术。

复制功能:

数据分布
负载均衡(读)
备份
高可用和故障切换
MySQL升级测试

复制方式:

主–从复制
主–主复制
半同步复制

复制原理:

Mysql 中有一种日志叫做 bin 日志(二进制日志)。这个日志会记录下所有修改了数据库的SQL 语句(insert,update,delete,create/alter/drop table, grant 等等)。
主从复制的原理其实就是把主服务器上的 bin 日志复制到从服务器上执行一遍,这样从服务器上的数据就和主服务器上的数据相同了。

复制流程图:
在这里插入图片描述
复制过程:

1.主节点必须启用二进制日志,记录任何修改了数据库数据的事件。
2.从节点开启一个线程(I/O Thread)把自己扮演成 mysql 的客户端,通过 mysql 协议,请求主节点的二进制日志文件中的事件
3.主节点启动一个线程(dump Thread),检查自己二进制日志中的事件,跟对方请求的位置对比,如果不带请求位置参数,则主节点就会从第一个日志文件中的第一个事件一个一个发送给从节点。
4.从节点接收到主节点发送过来的数据把它放置到中继日志(Relay log)文件中。并记录该次请求到主节点的具体哪一个二进制日志文件内部的哪一个位置(主节点中的二进制文件会有多个,在后面详细讲解)。
5.从节点启动另外一个线程(sql Thread ),把 Relay log 中的事件读取出来,并在本地再执行一次。

复制中线程的作用:
从节点:

I/O Thread: 从 Master 节点请求二进制日志事件,并保存于中继日志中。
Sql Thread: 从Relay log 中读取日志事件并在本地完成重放。

主节点:

Dump Thread:为每个 Slave 的 I/O Thread 启动一个 dump 线程,用于向从节点发送二进制事件。

**思考:**从节点需要建立二进制日志文件吗?
看情况,如果从节点需要作为其他节点的主节点时,是需要开启二进制日志文件的。这种情况叫做级联复制。如果只是作为从节点,则不需要创建二进制文件。

Mysql复制特点:

1.异步复制:主节点中一个用户请求一个写操作时,主节点不需要把写的数据在本地操作完成同时发送给从服务器并等待从服务器反馈写入完成,再响应用户。主节点只需要把写入操作在本地完成,就响应用户。但是,从节点中的数据有可能会落后主节点,可以使用(很多软件来检查是否落后)
2.主从数据不一致。

主从复制配置过程:
主节点:

1.启用二进制日志。
2.为当前节点设置一个全局唯一的server_id。
3.创建有复制权限的用户账号 REPLIACTION SLAVE ,REPLIATION CLIENT。

从节点:

1.启动中继日志。
2.为当前节点设置一个全局唯一的server_id。
3.使用有复制权限的用户账号连接至主节点,并启动复制线程。

配置演示:
测试环境:
主节点:192.168.0.196
从节点:192.168.0.198
mysql版本:mysql-5.5.17
linux:centos7.4

一。主节点
1:编辑主节点配置文件

[root@localhost ~]# vim /etc/my.cnf

2:启用二进制日志文件

添加:log-bin = mysql-bin
添加 :server-id =1
添加:innodb-file-per-table =ON
添加:skip_name_resolve=ON

在这里插入图片描述
3:重启mysql服务,并连接mysql

[root@localhost ~]# systemctl restart mariadb
[root@localhost ~]# mysql -uroot -p123456

4:查看日志信息

1:)查看二进制日志是否开启
在这里插入图片描述
2:)查看主节点二进制日志列表
在这里插入图片描述
3:)查看主节点的server id
在这里插入图片描述
5:在主节点上创建有复制权限的用户。REPLIACTION SLAVE ,REPLIATION CLIENT

MariaDB [(none)]> grant replication slave,replication client on *.* to 'slave'@'192.168.0.198' identified by '123456';

6:刷新

MariaDB [(none)]> flush privileges;

主服务器配置完成。
注意:确保主服务器的iptables没有阻断3306的访问端口。

二。从节点
1:编辑从节点配置文件,添加如下内容

添加:relay-log=relay-log
添加:relay-log-index=relay-log.index
添加:server-id=2
添加:innodb_file_per_table=ON
添加:skip_name_resolve=ON

2:重启从节点mysql服务,并登陆mysql

[root@localhost ~]# systemctl restart mariadb
[root@localhost ~]# mysql -uroot -p123456

3:查看从节点日志信息
1:)查看中继日志是否开启
在这里插入图片描述
2:)产看server 相关信息
在这里插入图片描述
4:在从节点配置访问主节点的参数信息
添加 主节点主机,访问主节点的用户名及密码,主节点二进制文件信息。
注意:主节点的二进制文件一定要是二进制列表中的最后一个二进制文件。
在这里插入图片描述

MariaDB [(none)]> change master to master_host='192.168.0.196',master_user='slave',master_password='123456',master_log_file='mysql-bin.000042',master_log_pos=362(不加引号);

5:查看从节点的状态信息
因为没有启动 从节点的复制线程,IO线程 和 SQL 线程都为NO.
在这里插入图片描述
6:启动复制线程,并查看此时状态
在这里插入图片描述
至此,mysql的主----从复制配置完成。

测试

1:)在主节点创建数据库,并查看主节点二进制日志信息
在这里插入图片描述
2:)在从节点查找二进制日志信息,并查看mydb数据库是否复制成功
在这里插入图片描述
在这里插入图片描述
补充:
如果创建主从同步前主库里已经数据库数据了,那还得进行以下操作:

1:刷新表然后锁表(只允许查数据不允许写数据):

mysql> flush tables with read lock;

2:然后备份要同步的数据库的数据,然后拷贝到从库里面

mysqldump -uroot -p test1>test1.sql;
mysqldump -uroot -p test2>test2.sql;

#如果全库备份则

mysqldump -uroot  -p  -hlocalhost > mysql.bak.sql

#然后传到从节点上:

[root@localhost ~]# scp mysql.bak.sql [email protected]:/tmp/
#从库要先创建数据库test1和test2,然后导入数据

mysql -uroot -p test1<test1.sql;
mysql -uroot -p test1<test2.sql;
或者
mysql> source /tmp/mysql.bak.sql 
注意:如果从已经开启了slave则要先停止: stop slave

将原来的已有数据手动同步到从库后在执行上边的同步操作

令:完成主从同步的操作后,最后要回到主库解锁表

unlock tables;

主从复制架构中应注意的问题:
从节点要设置某些限定使得它不能进行写操作,才能保证复制当中的数据一致。

1:限制从服务器为只读
在从服务器上设置:
read_only = ON,但是此限制对拥有SUPER权限 的用户均无效。
阻止所有用户:
mysq>FLUSH TABLES WITH READ LOCK;

2:如何保证主从复制时的事物安全?
1):在主节点设置参数
sync_binlog=1: Mysql开启bin-log日志使用bin-log时,默认情况下,并不是每次执行写入就与硬盘同步,这样在服务器崩溃时,就可能导致bin-log最后的语句丢失。可以通过这个参数来调节,sync_binlog=N,使执行N次写入后,与硬盘同步。1是最安全的,但是也是最慢的。
如果用到innode 存储引擎:
innodb_flush_logs_at_trx_commit=ON(刷写日志:在事务提交时,要将内存中跟事务相关的数据立即刷写到事务日志中去。)
innodb_support_xa=ON (分布式事务:基于它来做两段式提交功能)
sync_master_info=1:每次给从节点dump一些事件信息之后,主节点的master info 信息会立即同步到磁盘上。让从服务器中的 master_info 及时更新。
在这里插入图片描述
2):在每个slave节点

skip_slave_start =ON (跳过自动启动,使用手动启动。)
relay_log也会在内从中先缓存,然后在同步到relay_log中去,可以使用下面参数使其立即同步。
sync_relay_log =1 ,默认为10000,即每10000次sync_relay_log事件会刷新到磁盘。为0则表示不刷新,交由OS的cache控制。
sync_relay_log_info=1每间隔多少事务刷新relay-log.info,如果是table(innodb)设置无效,每个事务都会更新

注: 在从节点中 master.info是记录在主节点复制位置的文件。
在这里插入图片描述
relylog_info: 本地将来至于主节点的哪一个二进制文件中position并且保存文本地哪一个中继日志中的哪一个postion. 从节点启动时也需要根据relay-log.info定位本地relay-log.
在这里插入图片描述

发布了121 篇原创文章 · 获赞 60 · 访问量 14万+

猜你喜欢

转载自blog.csdn.net/weixin_43279032/article/details/103735665
今日推荐