rsyncの+ sersyncリアルタイムデータ同期：centos7サービスは、両者の共通のサービス構成を設定します

その他 2019-09-19 09:55:48 訪問数: null

ディレクトリ

1、RSYNCデータのバックアップ

約1.1 rsyncのサービス

rsyncコマンドはすぐに複数のホスト間でファイルを同期するLAN / WANを介したリモートデータ同期ツールです。ローカルとリモートホスト間のファイル2が同期するために「rsyncのアルゴリズム」、いわゆるrsyncが、このアルゴリズムは、ファイルの2つの異なる部分を送信し、常にではないが、全体の伝送を、そのため非常に高速。

1.2 rsyncを特長と利点

  • rsyncの機能
  • リモートファイルの同期 - 地元を達成するためのコマンドとして、

  • リモートファイルの同期 - ローカル実現するサービスとして、

  • rsyncの特長
  • 全体のディレクトリツリーとファイルシステムを保存することができますミラーリング
  • あなたは、元の許可（許可、モード）、所有者、グループ、時間（更新時刻、時間を変更する）、ソフトとハードリンク、ファイルのACL、ファイル属性（属性）情報を保持することができます
  • 高い伝送効率、同期アルゴリズムを使用する、唯一の変化を比較
  • 検証は、セキュリティを強化するために行うことができ、匿名の転送、便利なウェブサイトのミラーのサポート

  • データの送信中rsyncは圧縮および圧縮解除の操作を行うことができる、より少ない帯域幅を使用することが可能です

  • サービスのrsyncの同様のタイプ
  • 同期同期：ディスクに書き込まれた変更されたデータブロックを強制的に、ファイルシステムキャッシュをフラッシュし、スーパーブロックを更新します。
  • 非同期非同期：バッファへの最初のデータ、およびその後定期的に（通常30秒）をディスクに同期されます。

  • rsyncのリモート同期：リモート同期

  • 一般的なバックアップのカテゴリ
    • フルバックアップ：バックアップは、先にすべてのファイルやディレクトリをバックアップするバックアップ元からあるたびに
    • 差分バックアップ：前回のフルバックアップデータの変更後に（彼にとって最後のフルバックアップ、彼は、バックアップ・プロセスは、アーカイブ属性をクリアしていませんでした）
    • 増分バックアップ：バックアップした後、最後のバックアップデータの変更（彼はバックアップのタイプであったかどうか、バックアップのデータを変更、彼はアーカイブ属性をクリアします）。

注意：通常、シェルスクリプトと組み合わせるとより効果的。公式サイト：httpsを：//rsync.samba.org/

1.3 rysnc動作モードプロフィール

  • 動作モードとポート
  • C / Sモード（クライアント/サーバ・モデル）を使用して[すなわち直接rsyncを用いて、転送ポイントツーポイントです]

  • ポート873

  • 関連用語集
  • イニシエータ：rsyncのクライアントは、イニシエータ、私はあなたのデータをバックアップする通知サーバーと呼ばれる同期操作を開始するための責任があります
  • バックアップ出典：クライアントはrsyncのバックアップソースと呼ばれ、適切な同期サーバを担当してから、サーバーをバックアップする必要があります
  • サーバー：実行して、サービスをRSYNCD、一般的には、サーバーをバックアップする必要があります

  • クライアント：ストアのバックアップデータ

  • rysncdサービスが動作します：同期するために使用RSYNCDサービスを通じてxinetdの管理サービスをrysncd、着信rsyncのポートが873である場合、xinetdはその管轄下のrsyncサービスを通知します、ポート番号873を聞いてxinetdで最初で、その後、反応しませんにおけるサービス間、以下に示すようにrsyncは、ダウン2回の通信です。

1.4データ同期モード

二つのデータ同期方法：

  • ：プッシュプッシュモード小型のバックエンドサーバの場合に、より適したホストが別のホストにデータを担当し、偉大なサーバーのオーバーヘッド、
  • プルモードを引っ張っ：すべてはタイミングプルアップデータを見つけるために、ホストをホストして、データを遅らせるためにつながる可能性

  • 共通のデータ同期方法：
  • プッシュ：宛先ホストとして設定rsyncサーバ、送信元ホスト、定期的に（マシンをバックアップするクライアント・マシンのバックアップストレージがサーバである場合）ディレクトリ同期押しのけるためにrsyncコマンドを使用しますrsync -avz 源路径 user@远端服务器IP:目的路径

[root@centos7-127 tmp]# mkdir test1 # 创建测试文件见test1
[root@centos7-127 tmp]# cp /etc/passwd ./test1/ # 复制/etc/passwd作为测试文件
[root@centos7-127 tmp]# ll ./test1/ 
总用量 4
-rw-r--r-- 1 root root 2567 9月  17 17:43 passwd
[root@centos7-127 tmp]# rsync -avz /tmp/test1 [email protected]:/tmp/ # 将127上的/tmp/test1推到128的/tmp目录下
[email protected]'s password:  # 输入远端服务器root密码
sending incremental file list
test1/
test1/passwd

sent 1,127 bytes  received 39 bytes  155.47 bytes/sec
total size is 2,567  speedup is 2.20        # 传输完成
[root@centos7-128 tmp]# ll ./test1 # 在128上查看发现数据推送成功
总用量 4
-rw-r--r-- 1 root root 2567 9月  17 17:43 passwd
  • （マシンがバックアップを必要とするサーバ、ストレージおよびバックアップ・マシンがクライアントである場合）、送信元ホストとして設定rsyncサーバを、宛先がオーバープルするディレクトリコマンドを同期させるために定期的な使用のrsyncをホスト：プルrsync -avz user@远端服务器IP:源路径 目的路径

[root@centos7-127 tmp]# rsync -avz [email protected]:/tmp/test/ /tmp/test # 从128拉取数据
[email protected]'s password: 
receiving incremental file list
./
1.txt
2.txt
3.txt
4.txt
5.txt
6.txt
7.txt
8.txt
9.txt
a.txt
b.txt
c.txt
d.txt
e.txt
f.txt

sent 312 bytes  received 834 bytes  152.80 bytes/sec # 数据传输完成
total size is 0  speedup is 0.00

[root@centos7-127 tmp]# ll ./test # 查看发现数据拉取成功
总用量 0
-rw-r--r-- 1 root root 0 9月  16 10:38 1.txt
-rw-r--r-- 1 root root 0 9月  16 10:38 2.txt
-rw-r--r-- 1 root root 0 9月  16 10:38 3.txt
-rw-r--r-- 1 root root 0 9月  16 10:38 4.txt
-rw-r--r-- 1 root root 0 9月  16 10:38 5.txt
-rw-r--r-- 1 root root 0 9月  16 10:38 6.txt
-rw-r--r-- 1 root root 0 9月  16 10:38 7.txt
-rw-r--r-- 1 root root 0 9月  16 10:38 8.txt
-rw-r--r-- 1 root root 0 9月  16 10:38 9.txt
-rw-r--r-- 1 root root 0 9月  16 10:26 a.txt
-rw-r--r-- 1 root root 0 9月  16 10:26 b.txt
-rw-r--r-- 1 root root 0 9月  16 10:26 c.txt
-rw-r--r-- 1 root root 0 9月  16 10:26 d.txt
-rw-r--r-- 1 root root 0 9月  16 10:26 e.txt
-rw-r--r-- 1 root root 0 9月  16 10:26 f.txt

2のRsync実験テスト

2.1実験環境の説明

|： - ：|： - ：|： - ：|： - ：|
| | IP |インストールサービス|説明|
| 1 | 192.168.87.127 | rsyncのサービス|サーバー（データがバックアップされる）|
| 2 | 192.168.87.128 |インストールxinetdの、rsyncのサービス|（データをバックアップするための）クライアント|

2.2インストールサービス

rsyncのサービスは、スーパーのサービスを管理している、xinetdに依存します

rsyncサーバは、ターゲット・マシンにインストールする必要があります（注：centos7ない、一般的に最小限のインストールをデフォルトのrsyncサービスによってインストールされています）


[root@centos7-128 tmp]# yum -y install xinetd rsync # 在128上面安装Xinetd服务和Rsync服务
[root@centos7-128 tmp]# rsync --daemon # 启动rsync服务
[root@centos7-128 tmp]# netstat -anutp|grep 873 # 查看rsync端口873，确认rsync服务是否启动
tcp        0      0 0.0.0.0:873             0.0.0.0:*               LISTEN      41260/rsync         
tcp6       0      0 :::873                  :::*                    LISTEN      41260/rsync 
[root@centos7-127 tmp]# yum -y install rsync # 在127上面安装Rsync服务

2.3 rsyncコマンドの詳細

rsyncコマンド・パラメーター：

パラメータ 説明
-a --archiveアーカイブモード許可節約モード、-rlptgoDパラメータ、アーカイブ、再帰的に相当し、その財産を守ります
-r --recursiveは、以下のすべての情報をコピーし、再帰処理
-p --perms権は、元のファイルの属性をファイルを予約しました
-t --timesは、元のファイルの時間をいくつかの時間を節約します
-g オリジナルを保持--group基であります
-o --owner予約ファイルの所有者（rootのみ）
-D --devices保持装置情報（rootのみ）
-l --linksは、接続ファイルをコピーし、すべての接続をコピーします
-with --compress圧縮モード、宛先ファイル圧縮に送信するためのデータ
-H --hard-リンクはハードリンクされたファイルを保持します
-A --acls予約ACLプロパティは、ファイル--permsを満たすために必要があります
-P -Pパラメータと--partial --progress同じ。ただ、単純化する引数は、伝記の進行状況を表明しました
- 版 rsyncのバージョンの出力
-v --verbose複雑な出力
-u --updateは、ターゲットの場所がすでに存在して飛ばし、つまり、更新され、ファイルはそれ以降のファイルをバックアップする時間よりも、新しいファイルによって覆われていません
--port = PORT ポートを実行するように定義RSYNCD（デーモン）（デフォルトはTCP 873です）
--delete これらのファイルとバックアップ先を削除し、ソースファイルの一部ではありません
--password-ファイル= FILE ファイルからパスワードを取得します。
--bwlimit = Kbpsの I / O帯域幅を制限します
--filter「-filename」 ファイルをフィルタする必要があります
--exclude = filname ファイルをフィルタする必要があります
- 進捗 表示するバックアップ・プロセス

説明：共通パラメータ-avz

2.3実験データのバックアップコマンドはrsyncを使用して

上記ソースサーバーターゲット・ディレクトリサーバ128上の/ WEB-バックに127 / var / www / htmlと設定のバックアップディレクトリ

  • テストディレクトリを作成します。

[root@centos7-127 tmp]# mkdir -p /var/www/html # 创建测试目录
[root@centos7-127 var]# cp -R /boot/* /var/www/html/ # 将/boot/下的所有文件复制到测试目录，做欸测试文件使用
[root@centos7-127 var]# ll /var/www/html/
总用量 187816
-rw-r--r-- 1 root root   151923 9月  17 19:54 config-3.10.0-957.21.3.el7.x86_64
-rw-r--r-- 1 root root   151918 9月  17 19:54 config-3.10.0-957.el7.x86_64
drwx------ 3 root root       17 9月  17 19:54 efi
drwxr-xr-x 2 root root       27 9月  17 19:54 grub
drwx------ 5 root root       97 9月  17 19:54 grub2
-rw------- 1 root root 74017022 9月  17 19:54 initramfs-0-rescue-1d6dc8e931344828b171ea7fe67c3aa2.img
-rw------- 1 root root 31563403 9月  17 19:54 initramfs-3.10.0-957.21.3.el7.x86_64.img
-rw------- 1 root root 13599461 9月  17 19:54 initramfs-3.10.0-957.21.3.el7.x86_64kdump.img
-rw------- 1 root root 31562369 9月  17 19:54 initramfs-3.10.0-957.el7.x86_64.img
-rw------- 1 root root 13600009 9月  17 19:54 initramfs-3.10.0-957.el7.x86_64kdump.img
-rw-r--r-- 1 root root   314128 9月  17 19:54 symvers-3.10.0-957.21.3.el7.x86_64.gz
-rw-r--r-- 1 root root   314036 9月  17 19:54 symvers-3.10.0-957.el7.x86_64.gz
-rw------- 1 root root  3545891 9月  17 19:54 System.map-3.10.0-957.21.3.el7.x86_64
-rw------- 1 root root  3543471 9月  17 19:54 System.map-3.10.0-957.el7.x86_64
-rwxr-xr-x 1 root root  6639904 9月  17 19:54 vmlinuz-0-rescue-1d6dc8e931344828b171ea7fe67c3aa2
-rwxr-xr-x 1 root root  6643904 9月  17 19:54 vmlinuz-3.10.0-957.21.3.el7.x86_64
-rwxr-xr-x 1 root root  6639904 9月  17 19:54 vmlinuz-3.10.0-957.el7.x86_64

[root@centos7-128 tmp]# mkdir /web-back # 在目标服务器创建测试备份目录
  • テストユーザーを作成します。

[root@centos7-127 tmp]# useradd rget && echo rget:123456|chpasswd # 在源服务器127上面新建rget测试用户
[root@centos7-127 tmp]# id rget
uid=1001(rget) gid=1001(rget) 组=1001(rget)
[root@centos7-128 tmp]# useradd rget && echo rget:123456|chpasswd # 在目标服务器128上面新建rget测试用户
[root@centos7-128 tmp]# id rget
uid=1001(rget) gid=1001(rget) 组=1001(rget)
  • ディレクトリに指定されたACLの権限

[root@centos7-127 var]# setfacl -R -m user:rget:rwx /var/www/html/ 
# 在源服务器上面设置rget权限，-R参数是递归将目录以及在目录和文件权限均进行设置
[root@centos7-127 var]# setfacl -R -m default:rget:rwx /var/www/html/ 
[root@centos7-127 var]# getfacl /var/www/html
getfacl: Removing leading '/' from absolute path names
# file: var/www/html
# owner: root
# group: root
user::rwx
user:rget:rwx
group::r-x
mask::rwx
other::r-x
default:user::rwx
default:user:rget:rwx
default:group::r-x
default:mask::rwx
default:other::r-x


[root@centos7-128 tmp]# chown -R rget:rget /web-back/
#在目标服务器上修改rget对备份目录的权限
[root@centos7-128 tmp]# getfacl /web-back/
getfacl: Removing leading '/' from absolute path names
# file: web-back/
# owner: rget
# group: rget
user::rwx
group::r-x
other::r-x
  • rsyncのバックアップデータを持ちます

[root@centos7-127 var]# rsync -avz --delete /var/www/html/ [email protected]:/web-back/
[email protected]'s password: 
sending incremental file list
./
System.map-3.10.0-957.21.3.el7.x86_64
System.map-3.10.0-957.el7.x86_64
config-3.10.0-957.21.3.el7.x86_64
config-3.10.0-957.el7.x86_64
initramfs-0-rescue-1d6dc8e931344828b171ea7fe67c3aa2.img
initramfs-3.10.0-957.21.3.el7.x86_64.img
initramfs-3.10.0-957.21.3.el7.x86_64kdump.img
initramfs-3.10.0-957.el7.x86_64.img
initramfs-3.10.0-957.el7.x86_64kdump.img
symvers-3.10.0-957.21.3.el7.x86_64.gz
symvers-3.10.0-957.el7.x86_64.gz
.efi
efi/EFI/centos/
...
...
grub2/locale/tr.mo
grub2/locale/uk.mo
grub2/locale/vi.mo
grub2/locale/zh_CN.mo
grub2/locale/zh_TW.mo

sent 190,101,501 bytes  received 6,410 bytes  14,082,067.48 bytes/sec
total size is 207,914,035  speedup is 1.09

2.4実験2 RSYNCDデータバックアップサービス

データバックアップのためのRSYNCDサービスを使用する場合は、システム構成設定はファイル/etc/rsyncd.confファイルを使用して、バックアップアカウントを作成し、最終的にはデーモンへのrsyncの方法を実行します

  • rsyncd.confプロファイルの説明

あなたは次のcentos6を作成する必要があるので、centos7は、一般的に、デフォルトのファイルを/etc/rsyncd.confています

グローバルパラメータモジュールのパラメータ：二つの部分に分かれプロフィール

モジュールパラメータとグローバルパラメータの競合は、ローカル競合が効果モジュールパラメータ取る場合rsyncサーバの発効、グローバルパラメータは、
モジュールパラメータ：定義によって定義されたパラメータをrsyncの出力ディレクトリが必要です

共通のグローバルパラメータ：

パラメータ 説明
港 デーモンが使用するポート番号を指定し、デフォルトは873です。
UID このオプションは、ファイル転送モジュールデーモンはファイルのパーミッションGIDオプションの種類は、デフォルト値である「誰」を決定するために使用することができる方法でアクセスすることができ、UIDが必要です指定します。
ガイド ファイル転送モジュールデーモンgidをしている必要があるときにこのオプションが指定されます。デフォルトでは、「誰も」ではありません。
最大接続数 このモジュールの同時接続の最大数は、接続要求は限界が知らされた後、再度お試しされます超えて、サーバーを保護することです。デフォルト値はつまり、制限はありません、0です。
ロックファイル サポート最大接続パラメータは、デフォルト値は/var/run/rsyncd.lockで、ロックファイルを指定します。
motdファイル " motd file"参数用来指定一个消息文件，当客户连接服务器时该文件的内容显示给客户，默认是没有motd文件的。
log file " log file"指定rsync的日志文件，而不将日志发送给syslog。
pid file 指定rsync的pid文件，通常指定为“/var/run/rsyncd.pid”，存放进程ID的文件位置。
hosts allow 单个IP地址或网络地址 //允许访问的客户机地址

常见的模块参数：主要是定义服务器哪个要被同步输出，其格式必须为“ [ 共享模块名 ]” 形式，这个名字就是在 rsync 客户端看到的名字，其实很像 Samba 服务器提供的共享名。而服务器真正同步的数据是通过 path 来指定的。

参数 说明
Comment 给模块指定一个描述，该描述连同模块名在客户连接得到模块列表时显示给客户。默认没有描述定义。
Path 指定该模块的供备份的目录树路径，该参数是必须指定的。
read only yes为只允许下载，no为可以下载和上传文件到服务器
exclude 用来指定多个由空格隔开的多个文件或目录(相对路径)，将其添加到exclude列表中。这等同于在客户端命令中使用―exclude或----filter来指定某些文件或目录不下载或上传(既不可访问)
exclude from 指定一个包含exclude模式的定义的文件名，服务器从该文件中读取exclude列表定义，每个文件或目录需要占用一行
include 用来指定不排除符合要求的文件或目录。这等同于在客户端命令中使用--include来指定模式，结合include和exclude可以定义复杂的exclude/include规则。
include from 指定一个包含include模式的定义的文件名，服务器从该文件中读取include列表定义。
auth users 该选项指定由空格或逗号分隔的用户名列表，只有这些用户才允许连接该模块。这里的用户和系统用户没有任何关系。如果" auth users"被设置，那么客户端发出对该模块的连接请求以后会被rsync请求challenged进行验证身份这里使用的challenge/response认证协议。用户的名和密码以明文方式存放在" secrets file"选项指定的文件中。默认情况下无需密码就可以连接模块(也就是匿名方式)。
secrets file 该选项指定一个包含定义用户名:密码对的文件。只有在" auth users"被定义时，该文件才有作用。文件每行包含一个username:passwd对。一般来说密码最好不要超过8个字符。没有默认的secures file名，注意：该文件的权限一定要是600，否则客户端将不能连接服务器。
hosts allow 指定哪些IP的客户允许连接该模块。定义可以是以下形式：
单个IP地址，例如：192.167.0.1，多个IP或网段需要用空格隔开，
整个网段，例如：192.168.0.0/24，也可以是192.168.0.0/255.255.255.0
“*”则表示所有，默认是允许所有主机连接。
hosts deny 指定不允许连接rsync服务器的机器，可以使用hosts allow的定义方式来进行定义。默认是没有hosts deny定义。
list 该选项设定当客户请求可以使用的模块列表时，该模块是否应该被列出。如果设置该选项为false，可以创建隐藏的模块。默认值是true。
timeout 通过该选项可以覆盖客户指定的IP超时时间。通过该选项可以确保rsync服务器不会永远等待一个崩溃的客户端。超时单位为秒钟，0表示没有超时定义，这也是默认值。对于匿名rsync服务器来说，一个理想的数字是600。
  • 配置rsyncd.conf文件

在目标服务器128上配置rsyncd.conf文件


[root@centos7-128 ~]# vi /etc/rsyncd.conf

# /etc/rsyncd: configuration file for rsync daemon mode

# See rsyncd.conf man page for more options.

# configuration example:

uid = root # 运行进程的用户
gid = root # 运行进程的组 
address = 192.168.87.128  # 监听ip
port = 873 # 监听端口
hosts allow = 192.168.87.0/24 
# 允许同步客户端的IP地址，可以是网段，或者用*表示所有 192.168.1.0/24或192.168.1.0/255.255.255.0，多个网段用空格隔开
use chroot = yes
#  #是否囚牢，锁定家目录，rsync被黑之后，黑客无法再rsync运行的家目录之外创建文件，选项设置为yes
max connections = 5 # 最大连接数
pid file = /var/run/rsyncd.pid # 进程id，自动生成
lock file = /var/run/rsync.lock # 指定max connetctions参数的锁文件
log file = /var/log/rsync.log # 日志文件
motd file = /etc/rsyncd.motd # 客户端登陆后所显示提示信息的保存文件
# exclude = lost+found/ 
# transfer logging = yes
timeout = 100 # 等待超时时间
# ignore nonreadable = yes
# dont compress   = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2

# [ftp]
#        path = /home/ftp
#        comment = ftp export area

[wwwroot] # 共享（同步）模块名称

path = /web-back/ # 路径
comment = used for web-data backup # 描述说明
read only = false # 设置文件读写权限，false为可读写，ture为只读
list = yes # 是否容许查看模块信息
auth users = rsyncuser # 备份使用的用户名，和系统用户无关
secrets file = /etc/rsync.passwd # 存放备份用户信息的文件，格式为： 用户名：密码
  • 创建提示文件和用户密码

在目标服务器128上，创建提示文件和用户密码文件


[root@centos7-128 ~]# echo "Welcome to Rsyncd Backup Server" >> /etc/rsyncd.motd # 编辑motd文件
[root@centos7-128 ~]# vim /etc/rsync.passwd # 编辑备份用户信息文件

rsyncuser:password123
[root@centos7-128 ~]# chmod 600 /etc/rsync.passwd
# 目录权限必须是700或者600，否则的话身份验证会失效.
  • 启动服务测试

在目标服务器128上，启动xinetd和rsyncd服务


[root@centos7-128 ~]# systemctl start xinetd # 启动xinetd服务
[root@centos7-128 ~]# systemctl enable xinetd # 容许xinetd服务开机启动
[root@centos7-128 ~]# rsync --daemon --config=/etc/rsyncd.conf
[root@centos7-128 ~]# netstat -nlntp|grep 873
tcp        0      0 192.168.87.128:873      0.0.0.0:*               LISTEN      11597/rsync
[root@centos7-128 ~]# rm -rf /web-back/* # 删除/web-back/下的原有文件，准备测试

在源服务器127上启动测试，向128推送数据

语法：

pull拉数据: rsync 选项 用户名@备份源服务器IP::共享模块名 目标目录

push推数据： rsync 选项 源目录 用户名@备份源服务器IP::共享模块名


[root@centos7-127 ~]# rsync -avz --delete /var/www/html [email protected]::wwwroot
Welcome to Rsyncd Backup Server

Password:       # 手动输入rsync数据传输用户rsyncuser的密码
sending incremental file list
html/
html/System.map-3.10.0-957.21.3.el7.x86_64
html/System.map-3.10.0-957.el7.x86_64
html/config-3.10.0-957.21.3.el7.x86_64
html/config-3.10.0-957.el7.x86_64
html/initramfs-0-rescue-1d6dc8e931344828b171ea7fe67c3aa2.img
html/initramfs-3.10.0-957.21.3.el7.x86_64.img
html/initramfs-3.10.0-957.21.3.el7.x86_64kdump.img
...
...
html/grub2/locale/uk.mo
html/grub2/locale/vi.mo
html/grub2/locale/zh_CN.mo
html/grub2/locale/zh_TW.mo

sent 190,101,514 bytes  received 6,419 bytes  5,849,474.86 bytes/sec
total size is 207,914,035  speedup is 1.09  # 传输成功完成，测试成功
  • 自动密码处理

在使用rsync传输数据时，需要输入传输用户的密码，其实可以通过新建一个文件保存好密码，然后在rsync命令中使用--password-file指定此文件即可完成密码的自动输入。如下：


[root@centos7-127 ~]# vim /etc/rsync.passwd # 在源服务器配置存放密码的文件rsync.passwd，这里文件名可以自己定义

password123
[root@centos7-127 ~]# chmod 600 /etc/rsync.passwd # 修改密码文件的权限
[root@centos7-127 ~]# rsync -avz --delete --password-file=/etc/rsync.passwd /var/www/html [email protected]::wwwroot 
# 加入--password--file参数，指定密码文件，完成自动输入密码测试
Welcome to Rsyncd Backup Server

sending incremental file list
html/
html/System.map-3.10.0-957.21.3.el7.x86_64
html/System.map-3.10.0-957.el7.x86_64
html/config-3.10.0-957.21.3.el7.x86_64
html/config-3.10.0-957.el7.x86_64
html/symvers-3.10.0-957.21.3.el7.x86_64.gz
html/symvers-3.10.0-957.el7.x86_64.gz
html/vmlinuz-0-rescue-1d6dc8e931344828b171ea7fe67c3aa2
html/vmlinuz-3.10.0-957.21.3.el7.x86_64
html/vmlinuz-3.10.0-957.el7.x86_64
html/efi/
...
...
html/grub2/locale/pl.mo
html/grub2/locale/pt_BR.mo
html/grub2/locale/ru.mo
html/grub2/locale/sl.mo
html/grub2/locale/sv.mo
html/grub2/locale/tr.mo
html/grub2/locale/uk.mo
html/grub2/locale/vi.mo
html/grub2/locale/zh_CN.mo
html/grub2/locale/zh_TW.mo

sent 26,786,735 bytes  received 6,324 bytes  10,717,223.60 bytes/sec
total size is 43,571,771  speedup is 1.63 # 传输完成，测试成功
  • 使用shell脚本实现自动备份

[root@centos7-127 ~]# vim autobackup.sh 

#!/bin/bash

SOURDIR="/var/www/html" # 设置源服务器路径
BACKUPUSER="rsyncuser" # 设置备份用户
DESTADDR="192.168.87.128" # 设置远程服务器
OBJECT="wwwroot" # 设置备份项目名称
SECUREFILE="/opt/passfile" #

rsync -avz --delete $SOURDIR $BACKUPUSER@$DESTADDR::$OBJECT --password-file=$SECUREFILE

[root@centos7-127 ~]# chmod +x autobackup.sh 给shell脚本可执行权限
[root@centos7-127 ~]# vim /opt/passfile

password123
[root@centos7-127 ~]# chmod 600 /opt/passfile #修改密码文件权限
[root@centos7-127 ~]# echo "1 3 * * * sh /root/autobackup.sh &" >> /var/spool/cron/root 
# 设置每天的3点过1分自动执行备份脚本

3、Rsync+sersync实现数据实时同步

3.1 rsync+sersync架构作用

  • sersync是基于inotify开发的，类似于inotify-tools的工具
  • sersync可以记录下被监听目录中发生变化的（包括增加、删除、修改）具体某一个文件或者某一个目录的名字，然后使用rsync同步的时候，只同步发生变化的文件或者目录

3.2 rsync+inotify-tools与rsync+sersync架构的区别

  • rsync+inotify-tools
  • inotify只能记录下被监听的目录发生了变化（增，删，改）并没有把具体是哪个文件或者哪个目录发生了变化记录下来；
  • rsync在同步的时候，并不知道具体是哪个文件或目录发生了变化，每次都是对整个目录进行同步，当数据量很大时，整个目录同步非常耗时（rsync要对整个目录遍历查找对比文件），因此效率很低
  • rsync+sersync
  • sersync可以记录被监听目录中发生变化的（增，删，改）具体某个文件或目录的名字；
  • rsync在同步时，只同步发生变化的文件或目录（每次发生变化的数据相对整个同步目录数据来说很小，rsync在遍历查找对比文件时，速度很快），因此效率很高。

3.3 同步过程和原理

  • 原理
  • 在同步服务器上开启sersync服务，sersync负责监控配置路径中的文件系统事件变化；
  • 调用rsync命令把更新的文件同步到目标服务器；
  • 需要在主服务器配置sersync，在同步目标服务器配置rsync server（注意：是rsync服务）
  • 同步过程
  • 用户实时的往sersync服务器上写入更新文件数据；
  • 此时需要在同步主服务器上配置sersync服务；
  • 在另一台服务器开启rsync守护进程服务，以同步拉取来自sersync服务器上的数据；

3.4 实验模拟实现rsync+sersync架构

3.4.1 环境说明

IP 系统 说明
192.168.87.127 centos7 Sersync服务器（数据源机器）
192.168.87.128 centos7 Rsync服务器（备份端，目标机器）

3.4.2 部署程序

1、下载sersync

在google code下载sersync的可执行文件版本，里面有配置文件与可执行文件
wget https://sersync.googlecode.com/files/sersync2.5.4_64bit_binary_stable_final.tar.gz（有时下载失败，所有要本地留存才行）

附sersync度娘下载地址：链接：https://pan.baidu.com/s/1nB_QCbWi-g_ISeqYYWZLUA 提取码：jks8

上传到服务器 /opt 目录下


[root@centos7-127 ~]# mv ./sersync2.5.4_64bit_binary_stable_final.tar.gz /opt 
# 上传sersync安装包到/opt
[root@centos7-127 ~]# cd /opt
[root@centos7-127 opt]# tar -xzvf sersync2.5.4_64bit_binary_stable_final.tar.gz # 解压安装包
GNU-Linux-x86/
GNU-Linux-x86/sersync2
GNU-Linux-x86/confxml.xml
[root@centos7-127 opt]# mv GNU-Linux-x86 sersync # 改名为sersync

2、配置sersync


[root@centos7-127 sersync]# cp confxml.xml confxml.xml.bak # 备份配置文件
[root@centos7-127 sersync]# vim confxml.xml #修改sersync配置文件

...
 23     <sersync>
 24         <localpath watch="/var/www/html"> 
    # 配置监听目录localpath wahch为需要备份的目录
 25             <remote ip="192.168.87.128" name="wwwroot"/> 
    # 配置remote ip为远端服务器地址，name为备份项目名称
 26             <!--<remote ip="192.168.8.39" name="tongbu"/>--> 
 27             <!--<remote ip="192.168.8.40" name="tongbu"/>-->
 28         </localpath>
 29         <rsync>
 30             <commonParams params="-artuz"/>
 31             <auth start="ture" users="rsyncuser" passwordfile="/etc/rsync.passwd"/>
    # 配置auth start为ture（开启），users为备份数据用户，passwordfile为密码文件
 32             <userDefinedPort start="false" port="874"/><!-- port=874 -->
 33             <timeout start="start" time="100"/><!-- timeout=100 -->
    # 配置timeout start为ture（超时断开是否启动）time为超时断开时间按需求配置
 34             <ssh start="false"/>
...

3、开启sersync守护进程同步数据


[root@centos7-127 ~]# /opt/sersync/sersync2 -d -r -o /opt/sersync/confxml.xml

4、测试
在127 /var/www/html/ 目录 增删改目录文件,
看128 /web-back 目录的变化


[root@centos7-128 html]# watch ls -l

5、设置sersync监控开机自动执行

vi /etc/rc.d/rc.local  # 编辑，在最后添加一行
/opt/sersync/sersync2 -d -r -o  /opt/sersync/confxml.xml  ＃设置开机自动运行脚本

vi  /opt/check_sersync.sh  # 编辑，添加以下代码
#!/bin/sh
sersync="/opt/sersync/sersync2"
confxml="/opt/sersync/confxml.xml"
status=$(ps aux |grep 'sersync2'|grep -v 'grep'|wc -l)
if [ $status -eq 0 ];
then
$sersync -d -r -o $confxml &
else
exit 0;
fi

chmod +x /opt/check_sersync.sh # 添加脚本执行权限

把这个脚本加到任务计划,定期执行检测

补充： 多实例情况
1、配置多个confxml.xml文件（比如：www、bbs、blog....等等）
2、根据不同的需求同步对应的实例文件
/usr/local/sersync/sersync2 -d -o /usr/local/sersync/www_confxml.xml
/usr/local/sersync/sersync2 -d -o /usr/local/sersync/bbs_confxml.xml

END
2019-9-18 23:15:16

おすすめ

転載: www.cnblogs.com/yj411511/p/11546297.html
おすすめ
ランキング
uni.request在接口状态码403等还是走success
Springboot は mybatisplus を統合しており、ページング クエリによって返される Page オブジェクトの合計は常に 0 です。
System.InvalidOperationExceptionが：「BuildWindowCoreは、子ウィンドウのハンドル搭乗を返しません。」
[Example 08] IPD system advancement: version naming rules for version management
カスタム NavigationBar -- UIView による描画
データとデータの移行を復元します（個人的なメモ、無用リーダー）
4. 2次元配列で検索する
vim的私人订制
Flutterのカスタムルーティング切り替えアニメーション
Javaコンテナの方法の簡単なアプリケーションのArrayList
アーカイブ
もっと
2024-05-12(27)
2024-05-11(31)
2024-05-10(33)
2024-05-09(30)
2024-05-08(18)
2024-05-07(34)
2024-05-06(6)
2024-05-05(0)
2024-05-04(18)
2024-05-03(8)

コードワールド

© 2018 codetd.com