硬盘有价，数据无价---实现对MySQL数据库完整备份，库备份，表备份，增量备份与断点恢复

前言----硬盘有价，数据无价

在生产环境中，数据的安全性是至关重要的，任何数据的丢失都可能产生严重的后果

一：数据库备份的分类

1.1：数据丢失的原因有哪些？

程序错误
人为错误（大部分原因）
计算机失败
磁盘失败
灾难（如火灾，地震）和偷窃

1.2：从物理与逻辑的角度，如何分类备份

物理备份：对数据库操作系统的物理文件（如数据文件、日志文件等）的备份
数据库在物理层面分成了三类文件，每一个文件的名字以表的名字开始，扩展名指出文件类型
表结构文件：.frm文件存储表定义
表数据文件的扩展名为.MYD（ MYData）
表索引文件的扩展名是.MYI（ MYIndex）
物理备份又可以分为脱机备份（冷备份）和联机备份（热备份）
冷备份：是在关闭数据库的时候进行的
热备份：数据库处于运行状态，这种备份方法依赖于数据库的日志文件
逻辑备份：对数据库逻辑组件（如表等数据库对象）的备份

1.3：从数据库的备份策略角度，如何分类备份

完全备份：每次对数据进行完整的备份
差异备份：备份那些自从上次完全备份之后被修改过的文件
增量备份：只有那些在上次完全备份或者增量备份后被修改的文件才会被备份

1.4 对所有库进行完全备份

mysqldump -u用户名-p[密码][选项]--all-databases >/备份路径/备份文件名
所有库备份的示例
mysqldump -u root -p --opt --all-databases > /backup/all-data.sql

1.5 mysqldump命令对多个库进行完全备份

mysqldump -u用户名-p[密码][选项]--databases库名1[库名2]...>
/备份路径/备份文件名
多库备份的示例
mysqldump -u root -p --databases auth mysql >/backup/databases-
auth-mysql.sql

1.6 mysqldump命令对单个库进行完全备份

mysqldump -u用户名-p[密码][选项][数据库名]>/备份路径/备份文件名
单库备份的示例
mysqldump -u root -p auth > /backuplauth.sql
mysqldump -u root -p mysql > /bakcup/mysql.sql

1.7 物理冷备份与恢复

备份

 先关闭数据库，之后打包备份
物理冷备份
[root@localhost~]# systemctl stop mysqld
[root@localhost~]# mkdir /backup
[root@localhost~]# tar zcf /backup/mysql_all-$(date +%F).tar.gz /usrllocal/mysql/datal

恢复数据库

恢复数据库，采用将备份数据
mv成线上库文件夹的方式
[root@localhost~]# mkdir bak
[root@localhost~]# mv /usr/local/mysql/datal/bak/
[root@localhost~]# mkdir restore
[root@localhost ~]# tar zxf /backup/mysql_all-2020-01-O2.tar.gz -C restorel
[root@localhost~]# mv restorelusrllocal/mysql/datal lusrllocal/mysql
[root@localhost~]# systemctl start mysqld 

1.8 使用mysqldump导出的脚本，可使用导入的方法

source命令
mysql命令
使用source恢复数据库的步骤
登录到MySQL数据库
执行source备份sql脚本的路径
source 恢复的示例
MySQL[(none)]>source /backuplall-data.sql
Source :  作用在mysql  里面 ，用的是绝对路径
Mysql ： 作用在bash 环境

二：如何实现MySQL增量备份

2.1：什么是MySQL增量备份

只有那些在上次完全备份或者增量备份后被修改的文件才会被备份
增量备份就是备份自上一次备份之后增加或变化的文件或者内容

2.2：使用mysqldump命令进行完全备份存在的问题

备份数据中有重复数据
备份时间与恢复时间长

2.3：增量备份有什么优缺点

优点：
没有重复数据，效率高，空间利用率最大化
备份量不大，时间短
缺点：
恢复麻烦：需要上次完全备份及完全备份之后所有的增量备份才能恢复，而且要对所有增量备份进行逐个反推恢复
安全性较低

2.4：如何实现MySQL增量备份

MySQL没有提供直接的增量备份方法

可以通过 MySQL提供的二进制日志（ binary logs）间接实现增量备份

MySQL的配置文件的[mysqld]项中加入log-bin=filepath项（filepath是二进制文件的路径），
如

log-bin=mysql-bin

然后重启mysqld服务。

二进制日志文件的默认路径为

/usr/local/mysql/data

[root@localhost ~]# vim /etc/my.cnf

'//在[mysqld]项中加入配置 log-bin=mysql-bin'
...省略内容
[mysqld]
user = mysql
basedir = /usr/local/mysql
datadir=/usr/local/mysql/data
port = 3306
character_set_server=utf8
pid-file = /usr/local/mysql/mysqld.pid
socket = /usr/local/mysql/mysql.sock
server-id = 1
log-bin=mysql-bin	'//添加此句'
...省略内容
[root@localhost ~]# systemctl restart mysqld	'//重启服务'
[root@localhost ~]# ls /usr/local/mysql/data/
...省略内容
mysql-bin.000001	'//发现已经生成了二进制文件，设置成功'
...省略内容

MySQL二进制日志对备份的意义

二进制日志保存了所有更新或者可能更新数据库的操作

二进制日志在启动 MySQL服务器后开始记录，并在文件达到max_binlog_size所设置的大小或者接收到 flush-logs命令后重新创建新的日志文件

语法
mysqladmin -u 用户名 -p [密码] flush-logs

只需定时执行 flush-logs方法重新创建新的日志，生成二进制文件序列，并及时把这些旧的日志保存到安全的地方就完成了一个时间段的增量备份

2.5：如何增量恢复MySQL数据库

2.5.1：增量恢复的步骤是什么

添加数据–进行完全备份–录入新的数据–进行增量备份–模拟故障–恢复操作

2.6：有什么方式进行增量恢复

2.6.1：如何能查看到日志文件中的操作语句

mysqlbinlog --no-defaults --base64-output=decode-rows -v 日志文件名称 /opt/aaa.txt	'
//使用64位解码器按行输出日志文件放到/opt/aaa.txt中'
cat /opt/aaa.txt  '//查看日志文件的详细信息'

2.6.2 ：一般恢复

语法

mysqlbinlog [--no-defaults] 增量备份文件 | mysql -u 用户名 -p

2.6.3 ：断点恢复

基于位置恢复

就是将某个起始时间的二进制日志导入数据库中，从而跳过某个发生错误的时间点实现数据的恢复

恢复数据到指定位置
mysqlbinlog --stop-position='操作id' 二进制日志 |mysql -u 用户名 -p 密码

从指定的位置开始恢复数据
mysqlbinlog --start-position='操作id' 二进制日志 |mysql -u 用户名 -p 密码

基于时间点恢复

使用基于时间点的恢复，可能会出现在一个时间点里既同时存在正确的操作又存在错误的操作，所以我们需要一种更为精确的恢复方式

从日志开头截止到某个时间点的恢复
mysqlbinlog [--no-defaults] --stop-datetime='年-月-日 小时:分钟:秒' 二进制日志 |mysql -u 用户名 -p 密码

从某个时间点到日志结尾的恢复
mysqlbinlog [--no-defaults] --start-datetime='年-月-日 小时:分钟:秒' 二进制日志 |mysql -u 用户名 -p 密码

从某个时间点到某个时间点的恢复
mysqlbinlog [--no-defaults] --start-datetime='年-月-日 小时:分钟:秒' --stop-datetime='年-月-日 小时:分钟:秒' 二进制日志 |mysql -u 用户名 -p 密码

三 .具体备份实操验证

3.1 物理冷备份

[root@shanan mysql]# tar zcf /opt/mysql_all-$(date +%F).tar.gz /usr/local/mysql/data/

能执行成功，但会提示 tar: Removing leading `/’ from member names
首先应该明确：*nix系统中，使用tar对文件打包时，一般不建议使用绝对路径。

通常是在两台环境相似的机器上进行同步复制的时候，才有需要使用绝对路径进行打包。使用绝对路径打包时如果不指定相应的参数，tar会产生一句警告信息：”tar: Removing leading `/’ from member names”，并且实际产生的压缩包会将绝对路径转化为相对路径。

使用下面命令，相对路径就不会产生警告信息

[root@shanan mysql]# tar zcvf /opt/mysql_all-$(date +%F).tar.gz  data/  

会生成如下压缩包

 tar -zxvf mysql_all-2020-08-19.tar.gz  -C  /   还原到原来位置

对school 库进行备份
[root@shanan mysql]# systemctl restart mysqld

mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
| school             |
| sys                |
+--------------------+
5 rows in set (0.00 sec)

3.2 对库文件进行备份与还原

3.2.1 对单个库备份

[root@shanan mysql]# mysqldump -u root -p school >  /opt/schoolback.sql
Enter password:

[root@shanan mysql]# cd /opt

3.2.2 同时备份两个库

[root@shanan opt]#  mysqldump -uroot -psha1234567  --databases mysql school >/opt/abc/mysql_school.sql

3.3 备份表

3.3.1 备份单个表

[root@shanan abc]# mysqldump -uroot -psha1234567 school dog >/opt/abc/dog.sql

3.3.2 同时备份两个表

[root@shanan abc]# mysqldump -uroot -psha1234567 school dog pig > /opt/abc/dog_pig.sql
mysqldump: [Warning] Using a password on the command line interface can be insecure.

[root@shanan abc]# ll
total 1100
-rw-r--r--. 1 root root    2313 Aug 19 07:13 dog_pig.sql

3.3 以脚本文件备份的还原操作

3.3.1还原库文件

注意：还原库文件，先建库文件名，因为备份的是库里面的表

mysql> create database school;

mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
| school             |
| sys                |
+--------------------+
5 rows in set (0.00 sec)

mysql> use school ;
Database changed
mysql> source /opt/schoolback.sql;
Query OK, 0 rows affected (0.01 sec)

3.3.2 还原表文件

删除原先的表

mysql> drop table dog;
Query OK, 0 rows affected (0.00 sec)

mysql> drop table pig;
Query OK, 0 rows affected (0.00 sec)

mysql> show tables;
+------------------+
| Tables_in_school |
+------------------+
| bigdog           |
| cat              |
| test             |
+------------------+
7 rows in set (0.00 sec)

还原

mysql> source /opt/abc/dog_pig.sql
Query OK, 0 rows affected (0.00 sec)

mysql> show tables;
+------------------+
| Tables_in_school |
+------------------+
| bigdog           |
| cat              |
| dog              |
| pig              |
+------------------+

3.4 增量备份的操作

3.4.1 增量备份是以一次完整备份为依赖，所以需要先完整备份

完整备份 shanan   表
[root@shanan ~]# mysqldump -u root -psha1234567 school shanan> /opt/abc/shanan.sql
mysqldump: [Warning] Using a password on the command line interface can be insecure.

3.4.2 开启生成二进制日志文件

[root@shanan ~]# vim /etc/my.cnf

3.4.3 重启服务，发现已经生成了二进制日志文件

3.4.4下面进行模拟误操作，并进行恢复实验

mysql> select * from sha;
Empty set (0.00 sec)

mysql> select * from shanan;
±—±---------±------±--------+
| id | name | score | address |
±—±---------±------±--------+
| 1 | zhangsan | 88.00 | nanjing |
| 3 | lisi | 78.00 | beijing |
| 6 | wangwu | 66.00 | sh |
| 7 | zhaoliu | 56.00 | js |
| 8 | tianqi | 59.00 | sk |
±—±---------±------±--------+
5 rows in set (0.00 sec)

3.4.5 添加一条正确数据记录

mysql> insert into shanan (name,score,address)value('dagou',76,'JK');
ERROR 2006 (HY000): MySQL server has gone away
No connection. Trying to reconnect...
Connection id:    3
Current database: school

Query OK, 1 row affected (0.01 sec)

3.4.6 误删除一条记录

mysql> delete from shanan where id=1;
Query OK, 1 row affected (0.00 sec)

mysql> select * from shanan;
+----+---------+-------+---------+
| id | name    | score | address |
+----+---------+-------+---------+
|  3 | lisi    | 78.00 | beijing |
|  6 | wangwu  | 66.00 | sh      |
|  7 | zhaoliu | 56.00 | js      |
|  8 | tianqi  | 59.00 | sk      |
|  9 | dagou   | 76.00 | JK      |
+----+---------+-------+---------+
5 rows in set (0.00 sec)

3.4.7 添加一条正确记录

mysql> insert into shanan (name,score,address)value('xiaomao',65,'tj');
Query OK, 1 row affected (0.00 sec)

mysql> select * from shanan;
+----+---------+-------+---------+
| id | name    | score | address |
+----+---------+-------+---------+
|  3 | lisi    | 78.00 | beijing |
|  6 | wangwu  | 66.00 | sh      |
|  7 | zhaoliu | 56.00 | js      |
|  8 | tianqi  | 59.00 | sk      |
|  9 | dagou   | 76.00 | JK      |
| 10 | xiaomao | 65.00 | tj      |
+----+---------+-------+---------+
6 rows in set (0.00 sec)

mysql>

3.4.8 进行一次增量备份

[root@shanan data]# mysqladmin -uroot -psha1234567 flush-logs
mysqladmin: [Warning] Using a password on the command line interface can be insecure.

恢复误删的数据记录

解码二进制文件
[root@shanan data]# mysqlbinlog --no-defaults --base64-output=decode-rows -v myaql-bin.000001 > /opt/bk02.txt

删除原来的数据表进行恢复
mysql> drop table shanan;

3.4.具体的断点操作恢复

3.4.1 先还原完整备份的表

mysql> source /opt/abc/shanan.sql;
Query OK, 0 rows affected (0.01 sec)

mysql> select * from shanan;
+----+----------+-------+---------+
| id | name     | score | address |
+----+----------+-------+---------+
|  1 | zhangsan | 88.00 | nanjing |
|  3 | lisi     | 78.00 | beijing |
|  6 | wangwu   | 66.00 | sh      |
|  7 | zhaoliu  | 56.00 | js      |
|  8 | tianqi   | 59.00 | sk      |
+----+----------+-------+---------+
5 rows in set (0.00 sec)

3.4.2 下面从增量备份中断点恢复

3.4.3 第一种： 根据位置点还原

结合此数据内容
操作一

[root@shanan abc]#  mysqlbinlog --no-defaults --stop-position='575' /usr/local/mysql/data/myaql-bin.000001 | mysql -uroot -psha1234567
mysql: [Warning] Using a password on the command line interface can be insecure.

[root@shanan abc]#
mysql> select * from shanan;
+----+----------+-------+---------+
| id | name     | score | address |
+----+----------+-------+---------+
|  1 | zhangsan | 88.00 | nanjing |
|  3 | lisi     | 78.00 | beijing |
|  6 | wangwu   | 66.00 | sh      |
|  7 | zhaoliu  | 56.00 | js      |
|  8 | tianqi   | 59.00 | sk      |
|  9 | dagou    | 76.00 | JK      |
+----+----------+-------+---------+
6 rows in set (0.00 sec)

操作二

[root@shanan abc]# mysqlbinlog --no-defaults --start-position='695' /usr/local/mysql/data/myaql-bin.000001 | mysql -uroot -psha1234567
mysql: [Warning] Using a password on the command line interface can be insecure.

mysql> select * from shanan;
+----+----------+-------+---------+
| id | name     | score | address |
+----+----------+-------+---------+
|  1 | zhangsan | 88.00 | nanjing |
|  3 | lisi     | 78.00 | beijing |
|  6 | wangwu   | 66.00 | sh      |
|  7 | zhaoliu  | 56.00 | js      |
|  8 | tianqi   | 59.00 | sk      |
|  9 | dagou    | 76.00 | JK      |
| 10 | xiaomao  | 65.00 | tj      |
+----+----------+-------+---------+

至此，已达到了还原的目的。

3.4.3 第二种：根据时间点还原

删除原表
还原完整备份

mysql> source /opt/abc/shanan.sql;
Query OK, 0 rows affected (0.00 sec)

开始根据时间点进行恢复
操作一

[root@shanan abc]# mysqlbinlog --no-defaults --stop-datetime='2020-8-19 20:47:28' /usr/local/mysql/data/myaql-bin.000001 | mysql -uroot -psha1234567
mysql: [Warning] Using a password on the command line interface can be insecure.

mysql> select * from shanan;
+----+----------+-------+---------+
| id | name     | score | address |
+----+----------+-------+---------+
|  1 | zhangsan | 88.00 | nanjing |
|  3 | lisi     | 78.00 | beijing |
|  6 | wangwu   | 66.00 | sh      |
|  7 | zhaoliu  | 56.00 | js      |
|  8 | tianqi   | 59.00 | sk      |
|  9 | dagou    | 76.00 | JK      |
+----+----------+-------+---------+
6 rows in set (0.00 sec)

操作二

[root@shanan abc]# mysqlbinlog --no-defaults --start-datetime='2020-8-19 20:50:19' /usr/local/mysql/data/myaql-bin.000001 |mysql -uroot -psha1234567
mysql: [Warning] Using a password on the command line interface can be insecure.

mysql> select * from shanan;
+----+----------+-------+---------+
| id | name     | score | address |
+----+----------+-------+---------+
|  1 | zhangsan | 88.00 | nanjing |
|  3 | lisi     | 78.00 | beijing |
|  6 | wangwu   | 66.00 | sh      |
|  7 | zhaoliu  | 56.00 | js      |
|  8 | tianqi   | 59.00 | sk      |
|  9 | dagou    | 76.00 | JK      |
| 10 | xiaomao  | 65.00 | tj      |
+----+----------+-------+---------+
7 rows in set (0.00 sec)

致此，都还原回来了。