学习服务前,我们先想一个问题:什么是备份,我们为什么要备份,能不能不做备份,备份有哪几种,备份的方式有哪几种
1、什么是备份
简单来说备份就是一个文件的的副本,镜像
2、我们为什么要备份
简单来说,就是因为数据过于重要, 不能丢失,损坏,其要确保数据的安全,同时保证数据丢失损坏的情况下能快速恢复数据
3、能不能不做备份
在数据庞大切不重要的情况下,我们可以不考虑做备份
4、备份有哪几种
简单分为:数据备份和系统备份
5、备份的方式有哪几种
方式有全局备份和增量备份
下面,我们来一起学习下rsync这个基础服务,这是个什么服务?
一句话简短的概况一下:远程同步工具, 支持不同主机系统之间同步。(windows linux mac)并且能实现,全量与增量的同步方式。rsync是C/S 架构 即:客户端—>服务端 使用端口873/tcp。
1、我们继续说说rsync三大传输模式。
1、本地传输模式:类似于cp
[root@yu ~]# rsync -avz 123.txt /tmp/
[root@yu ~]# rsync -avz /etc/ /tmp/
注意: 每次拷贝都是增量,如果有新增,拷贝新增,如果修改历史拷贝过的文件,则同步修改后的文件
2、远程传输模式:类似于scp,基于ssh协议
[root@yu ~]# rsync -avz [email protected]:/root/123.txt /tmp
3、守护进程模式:以服务的方式运行在后台
[root@yu ~]# cat /etc/rsyncd.conf
uid = rsync # 运行进程的用户
gid = rsync # 运行进程的用户组
use chroot = no #安全功能,数据是否锁定到备份目录
fake super = yes #不需要rsync已root身份运行,就可以存储文件的完整属性
max connections = 200 #最大连接数,同时多少客户端访问
timeout = 600 #超时时间(秒)
pid file = /var/run/rsyncd.pid #pid进程号 所在文件
lock file = /var/run/rsync.lock #锁文件lock 比如两个窗口同时运行yum
log file = /var/log/rsyncd.log #日志文件,查看报错,排错必备
ignore errors #忽略错误
#read only = false #关闭只读
read only = true #开启只读
list = false #不允许列表
#hosts allow = 172.16.1.0/24 #allow准许哪些主机可以访问
#hosts deny = 0.0.0.0/32 #deny 拒绝哪些主机不可以访问
auth users = rsync #指定认证用户(不存在),远程虚拟链接用户
secrets file = /etc/rsync.password #存放密码的文件,权限 必须600
#####################################
[data] #模块名
path = /data #指定服务端用户备份的共享目录
- 创建进程运行的用户
[root@yu ~]# useradd rsync -M -s /sbin/nologin
- 创建虚拟用户以及虚拟用户的密码/etc/rsync.passwd
[root@yu ~]# cat /etc/rsync.passwd
rsync:1
[root@yu ~]# chmod 600 /etc/rsync.passwd
- 创建一个接收备份数据目录
[root@yu ~]# mkdir /data
[root@yu ~]# chown -R rsync.rsync /data/
- 启动与开机自启动
[root@yu ~]# systemctl start rsyncd
[root@yu ~]# systemctl enable rsyncd
- 检查端口
[root@yu ~]# netstat -lntp
注意:进程能够以什么样的方式去访问一个文件,取决于运行该进程的用户身份,对这个文件拥有什么权限
错误点:目录后加/与不加/区别
/tmp 目录和目录里的文件
/tmp/ 目录内的文件(不包含目录)
2、配置守护进程出现的一些常见报错
1、防火墙和selinux
2、密码文件名称和配置信息内容不符
3、模块找不到(可能是复制时候使用了vim)
3、rsync作为服务端一些选项 如何使用?
-a #归档模式传输, 等于-tropgDl
-v #详细模式输出, 打印速率, 文件数量等
-z #传输时进行压缩以提高效率
-r #递归传输目录及子目录,即目录下得所有目录都同样传输。
-t #保持文件时间信息
-o #保持文件属主信息
-p #保持文件权限
-g #保持文件属组信息
-l #保留软连接
-P #显示同步的过程及传输时的进度等信息
-D #保持设备文件信息
-L #保留软连接指向的目标文件
-e #使用的信道协议,指定替代rsh的shell程序 -e 'ssh'
--exclude=PATTERN #指定排除不需要传输的文件模式
--exclude-from=file #文件名所在的目录文件
--bwlimit=100 #限速传输
--partial #断点续传
--delete #让目标目录和源目录数据保持一致
4、显示传输的每秒的速率:-P
[root@yu ~]# dd if=/dev/zero of=./size_file bs=1M count=300
[root@yu ~]# rsync -avzP size_file [email protected]::data
sending incremental file list
size_file
314,572,800 100% 81.20MB/s 0:00:03 (xfr#1, to-chk=0/1)
5、限速,非常重要:- -bwlimit=10
[root@yu ~]# rsync -avzP --bwlimit=10 size_1G [email protected]::data
....
566,394,880 54% 10.12MB/s 0:00:46
6、强制同步:- -delete
在推送时添加–delete,强制让服务端与客户端保持一致,在拉取时添加–delete,强制让客户端与服务端保持一致
7、排除:- -exclude 或 - -exclude-from=文件
[root@yu ~]# rsync -avz --exclude=/root/123.txt /root [email protected]::data
8、密码免交互
第一种方式:
[root@yu ~]# echo "1" > /etc/rsync.pass
[root@yu ~]# chmod 600 /etc/rsync.pass
[root@yu ~]# rsync -avz /root [email protected]::data --password-file=/etc/rsync.pass
第二种方式:
[root@yu ~]# export RSYNC_PASSWORD=1
[root@yu ~]# rsync -avz /root [email protected]::data