MySQL服务器主从复制同步——主从复制的方式同步数据,企业必备操作!我会主从复制了,你呢?

一、MySQL主从复制原理

1.1、MySQL 支持的复制类型

  • 基于语句的复制(默认)
    在主服务器上执行的语句,从服务器执行同样的语句
  • 基于行的复制
    把改变的内容复制到从服务器
  • 混合类型的复制
    一旦发现基于语句无法精确复制时,就会采用基于行的复制

1.2、复制的工作过程

       ① 在每个事务更新数据完成之前,Master在二进制日志记录这些改变。写入二进制日志完成后,Master通知存储引擎提交事务
        ②Slave将Master的Binary log复制到其中继日志。首先,Slave开始一个工作线程——I/O线程,I/O线程在Master上打开一个普通的连接,然后开始Binlog dump process。Binlog dump process从Master的二进制日志中读取事件,如果已经跟上Master,他会睡眠并等待Master产生新的事件。I/O线程将这些事件写入中继日志。
        ③SQL slave thread(SQL从线程)处理该过程的最后一步。SQL线程从中继日志读取事件,并重放其中的事件而更新Slave的数据,使其与Master中的数据一致。只要该线程与I/O线程保持一致,中继日志通常会位于OS的缓存中,所以中继日志的开销很小。
复制过程有一个很重要的限制,即复制在Slave上是串行化的,也就是说Master上的并行更新操作不能再Slave上并行操作。

在这里插入图片描述

二、需要主从复制原因与改造方法

2.1、原因

■在企业网站中,后端MySQL数据库只有一台时,会有以下问题

  • 单点故障,服务不可用
  • 无法处理大量的并发数据请求
  • 数据丢失——大灾难
    在这里插入图片描述

2.2、改造办法

■改造办法

  • 增加MySQL数据库服务器,对数据进行备份,形成主备
  • 确保主备MySQL数据库服务器数据是一样的
  • 主服务器宕机了,备份服务器继续工作,数据有保障

在这里插入图片描述

2.3、更高级解决办法

■更高级解决办法

  • 通过主从复制的方式来同步数据,再通过读写分离来提升数据库的并发负载能力

在这里插入图片描述

三、实验过程

3.1、实验环境

  • 服务器配置

  IP地址          主机              操作系统
20.0.0.25      master      centos-7.6-x86_64
20.0.0.24      Slave1      centos-7.6-x86_64
20.0.0.23      Slave2      centos-7.6-x86_64

  • 三台MySQL服务器关闭防火墙,关闭核心防护

3.2、建立时间同步环境

  • 在主服务器上安装配置NTP时间同步服务器(20.0.0.25)
[root@localhost~]# yum -y install ntp    ###如果不是最小化安装,就不用yum安装ntp

[root@localhost~]# vi /etc/ntp.conf  
###删除下面四行###
server 0.centos.pool.ntp.org iburst
server 1.centos.pool.ntp.org iburst
server 2.centos.pool.ntp.org iburst
server 3.centos.pool.ntp.org iburst
###添加这两行###
server 127.127.1.0
fudge 127.127.1.0 stratum 8
[root@localhost~]# systemctl restart ntpd
[root@localhost~]# systemctl enable ntpd
[root@localhost ~]# service ntpd restart
[root@localhost ~]# systemctl restart ntpd
[root@localhost ~]# systemctl enable ntpd
  • 在从服务器1上配置NTP同步(20.0.0.24)
[root@localhost ~]# yum -y install ntpdate
[root@localhost ~]# ntpdate 20.0.0.25
[root@localhost ~]# crontab -e
*/2 * * * * /usr/sbin/ntpdate 20.0.0.24 >> /var/log/ntpdate.log
[root@localhost ~]# touch /var/log/ntpdate.log 
[root@localhost ~]# systemctl restart crond
[root@localhost ~]# systemctl enable crond
[root@localhost ~]# tail -f /var/log/ntpdate.log  ###动态查看更新日志文件
  • 在从服务器2上配置NTP同步(20.0.0.23)
[root@localhost ~]# yum -y install ntpdate
[root@localhost ~]# ntpdate 20.0.0.25
[root@localhost ~]# crontab -e
*/2 * * * * /usr/sbin/ntpdate 20.0.0.23 >> /var/log/ntpdate.log
[root@localhost ~]# touch /var/log/ntpdate.log 
[root@localhost ~]# systemctl restart crond
[root@localhost ~]# systemctl enable crond
[root@localhost ~]# tail -f /var/log/ntpdate.log  ###动态查看更新日志文件

3.3、主服务器、从服务器1、从服务器2均安装MySQL服务

[root@localhost~]# yum -y install \
ncurses \
ncurses-devel \
bison \
cmake \
gcc \
gcc-c++
[root@localhost~]# useradd -s /sbin/nologin  mysql
[root@localhost~]# cd /opt
[root@localhost opt]# tar xf mysql-boost-5.7.20.tar.gz
[root@localhost opt]# cd /opt/mysql-5.7.20/
[root@localhost mysql-5.7.20]# 
cmake \
-DCMAKE_INSTALL_PREFIX=/usr/local/mysql \
-DMYSQL_UNIX_ADDR=/usr/local/mysql/mysql.sock \
-DSYSCONFDIR=/etc \
-DSYSTEMD_PID_DIR=/usr/local/mysql \
-DDEFAULT_CHARSET=utf8  \
-DDEFAULT_COLLATION=utf8_general_ci \
-DWITH_INNOBASE_STORAGE_ENGINE=1 \
-DWITH_ARCHIVE_STORAGE_ENGINE=1 \
-DWITH_BLACKHOLE_STORAGE_ENGINE=1 \
-DWITH_PERFSCHEMA_STORAGE_ENGINE=1 \
-DMYSQL_DATADIR=/usr/local/mysql/data \
-DWITH_BOOST=boost \
-DWITH_SYSTEMD=1
[root@localhost mysql-5.7.20]# make -j4
[root@localhost mysql-5.7.20]# make install

[root@localhost mysql-5.7.20]# chown -R mysql:mysql /usr/local/mysql/  
 '//数据库目录进行权限调整'

[root@localhost mysql-5.7.20]# vi /etc/my.cnf     
 '//建立调整配置文件'
[client]
port = 3306
default-character-set=utf8
socket = /usr/local/mysql/mysql.sock

[mysql]
port = 3306
default-character-set=utf8
socket = /usr/local/mysql/mysql.sock

[mysqld]
user = mysql
basedir = /usr/local/mysql
datadir = /usr/local/mysql/data
port = 3306
character_set_server=utf8
pid-file = /usr/local/mysql/mysqld.pid
socket = /usr/local/mysql/mysql.sock
server-id = 1

sql_mode=NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES,NO_AUTO_CREATE_USER,NO_AUTO_VALUE_ON_ZERO,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,PIPES_AS_CONCAT,ANSI_QUOTES

[root@localhost mysql-5.7.20]# chown mysql:mysql /etc/my.cnf
[root@localhost mysql-5.7.20]# echo 'PATH=/usr/local/mysql/bin:/usr/local/mysql/lib:$PATH' >> /etc/profile
[root@localhost mysql-5.7.20]# echo 'export PATH' >> /etc/profile  
     '//设置环境变量'
[root@localhost mysql-5.7.20]# source /etc/profile    
'//生效'

[root@localhost mysql-5.7.20]# cd /usr/local/mysql/

[root@localhost mysql]# bin/mysqld \
--initialize-insecure \
--user=mysql \
--basedir=/usr/local/mysql \
--datadir=/usr/local/mysql/data

[root@localhost mysql]# cp usr/lib/systemd/system/mysqld.service /usr/lib/systemd/system/
[root@localhost mysql]# systemctl enable mysqld
[root@localhost mysql]# systemctl start mysqld
[root@localhost mysql]# systemctl status mysqld
[root@localhost mysql]# netstat -anpt | grep 3306
[root@localhost mysql]# mysqladmin -u root -p password
'//设置密码'
[root@localhost ~]# mysql -u root -p   ## 验证是否可以登录数据库
Enter password: 
mysql>

3.4、主服务器配置

[root@localhost ~]# vi /etc/my.cnf ###在原来server-id=1的地方修改成11后面新增log_bin=master-bin log-slave-updates=true###
server-id = 11         ## 修改为 11,下面的从服务器也会改,3个server-id 不可相同
log_bin = master-bin   ##设置二进制日志名
log-slave-updates = true   ## 从服务器更新二进制日志

[root@localhost ~]# systemctl restart mysqld ###重启数据库

登录Master数据库给从服务器授权
[root@localhost ~]# mysql -uroot -p
## 让20.0.0.0端的从服务器拥有复制权限,可以使用myslave身份12345密码复制所有的库和表
mysql> grant replication slave on *.* to 'myslave'@'20.0.0.%' identified by '12345';
mysql> flush privileges;   ## 刷新
mysql> show master status;  
+-------------------+----------+--------------+------------------+-------------------+
| File              | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+-------------------+----------+--------------+------------------+-------------------+
| master-bin.000001 |      599 |              |                  |                   |
+-------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)

3.5、从服务器 1 配置

[root@localhost ~]# vi /etc/my.cnf  ###在原来server-id=1的地方修改成22 后面新增relay-log=relay-log-bin relay-log-index=slave-relay-bin.index###
server-id = 22     ## 修改为22,另一台从服务器的id设为33,三个id不可相同
relay-log = relay-log-bin          ## 设置二进制日志名
relay-log-index = slave-relay-bin.index      ## 服务器更新二进制日志
[root@localhost ~]# systemctl restart mysqld  ###重启数据库
登录slave数据库配置同步 ###注意下这边的master_log_file='master-bin.000001',master_log_pos=601;要和Master数据库信息不一致,不一致的话要更改先stop slave;然后更改同步信息
[root@localhost ~]# mysql -uroot -p12345
mysql> change master to master_host='20.0.0.25',master_user='myslave',master_password='12345',master_log_file='master-bin.000001',master_log_pos=599;
mysql> start slave;
mysql> show slave status\G
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 20.0.0.25
                  Master_User: myslave
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: master-bin.000001
          Read_Master_Log_Pos: 599
               Relay_Log_File: relay-log-bin.000002
                Relay_Log_Pos: 321
        Relay_Master_Log_File: master-bin.000001
             Slave_IO_Running: Yes   ## 查看IO是正常的,这里显示 Yes 就可以了
            Slave_SQL_Running: Yes   ## 查看SQL是正常的,这里显示 Yes 就可以了
            ............................................
            1 row in set (0.00 sec)

3.6、从服务器 2 配置

[root@localhost ~]# vi /etc/my.cnf
server-id = 33
relay-log = relay-log-bin
relay-log-index = slave-relay-bin.index
[root@localhost ~]# systemctl restart mysqld
[root@localhost ~]# mysql -uroot -p12345
mysql> change master to master_host='20.0.0.25',master_user='myslave',master_password='12345',master_log_file='master-bin.000001',master_log_pos=599;

mysql> start slave;
mysql> show slave status\G
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 20.0.0.25
                  Master_User: myslave
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: master-bin.000001
          Read_Master_Log_Pos: 599
               Relay_Log_File: relay-log-bin.000002
                Relay_Log_Pos: 321
        Relay_Master_Log_File: master-bin.000001
             Slave_IO_Running: Yes   ## 这里显示 Yes 就可以了
            Slave_SQL_Running: Yes   ## 这里显示 Yes 就可以了
            ............................................
            1 row in set (0.00 sec)

3.7、验证:MySQL主从服务器

主服务器

mysql> create database School;  ## 创建 School库
Query OK, 1 row affected (0.00 sec)

mysql> show databases;   ## 查看主服务器有 School库
+--------------------+
| Database           |
+--------------------+
| information_schema |
| School             |
| mysql              |
| performance_schema |
| sys                |
+--------------------+
5 rows in set (0.00 sec)

从服务器 1

mysql> show databases;   ## 查看从服务器 1 有 School库
+--------------------+
| Database           |
+--------------------+
| information_schema |
| School             |   ## 同步成功!
| mysql              |
| performance_schema |
| sys                |
+--------------------+
5 rows in set (0.00 sec)

从服务器 2

mysql> show databases;   ## 查看从服务器 2 有 School库
+--------------------+
| Database           |
+--------------------+
| information_schema |
| School             |   ## 同步成功!
| mysql              |
| performance_schema |
| sys                |
+--------------------+
5 rows in set (0.00 sec)

3.8、实验小问题

主从复制没有成功,显示的参数是这样 Slave_IO_Running: Connecting
解决办法:

## 当我们输入这句代码完之后
mysql> change master to master_host='20.0.0.25',master_user='myslave',master_password='12345',master_log_file='master-bin.000001',master_log_pos=599;
mysql> start slave;
Query OK, 0 rows affected (0.00 sec)
mysql> show slave status\G
*************************** 1. row ***************************
            Slave_IO_Running: Connecting  ## 这里并没有改成 Yes
            Slave_SQL_Running: Yes

1、可能是因为 master_log_pos=599 这个值输入错了导致没有同步。
2、也可能是因为主服务器 IP 输入错了,或者是密码错了。

  • 这时候我们需要 stop slave
mysql> stop slave;  ## 先关闭
Query OK, 0 rows affected, 1 warning (0.00 sec)
mysql> change master to master_host='20.0.0.25',master_user='myslave',master_password='12345',master_log_file='master-bin.000001',master_log_pos=599;  ## 然后再给一次复制权限,把里面的参数改成正确的参数
mysql> start slave;  ## 在开启
mysql> show slave status\G
*************************** 1. row ***************************
            Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
## 再查看就已经设置成功了!
## 排障完成
  • 实验做到这里就结束了!我们最后验证了是可以进行主从复制的。
        1、做数据的热备,作为后备数据库,主数据库服务器故障后,可切换到从数据库继续工作,避免数据丢失。
        2、架构的扩展。业务量越来越大,I/O访问频率过高,单机无法满足,此时做多库的存储,降低磁盘I/O访问的频率,提高单个机器的I/O性能。
        3、读写分离,使数据库能支撑更大的并发。在报表中尤其重要。由于部分报表sql语句非常的慢,导致锁表,影响前台服务。如果前台使用master,报表使用slave,那么报表sql将不会造成前台锁,保证了前台速度。

下一篇博客我将介绍主从复制的读写分离!欢迎收看!

猜你喜欢

转载自blog.csdn.net/m0_46563938/article/details/108576868