rsync 远程同

Posted 2020-12-26

rsync 简介 ：

rsync是linux系统下的数据镜像备份工具。使用快速增量备份工具Remote Sync可以远程同步，支持本地复制，或者与其他SSH、rsync主机同步。

它的特性如下：

• 可以镜像保存整个目录树和文件系统。
• 可以很容易做到保持原来文件的权限、时间、软硬链接等等。
• 无须特殊权限即可安装。
• 快速：第一次同步时 rsync 会复制全部内容，但在下一次只传输修改过的文件。
• rsync 在传输数据的过程中可以实行压缩及解压缩操作，因此可以使用更少的带宽。
• 安全：可以使用scp、ssh等方式来传输文件，当然也可以通过直接的socket连接。
• 支持匿名传输，以方便进行网站镜象。

备份基本格式 ：

rsync [选项] 原始位置 目标位置

rsync -参数 用户名@同步服务器的IP::共享模块名 保存位置

例如：rsync -avzP [email protected]::nemo /backup

参数说明：

• -a 归档模式，相当于组合选项-rlptgoD，
• -r 是递归 -l 是链接文件，意思是拷贝链接文件；
• -p 表示保持文件原有权限；
• -t 保持文件原有时间；
• -g 保持文件原有用户组；
• -o 保持文件原有属主；
• -D 相当于块设备文件；
• -z 传输时压缩；
• -P 传输进度；
• -v 传输时的进度等信息，和-P有点关系，自己试试。
• -delete 删除目标位置有而原始位置没有的文件。

本案环境 ：

主机名	系统	IP地址
同步源	CentOS 7.3	192.168.217.128
客户端	CentOS 7.3	192.168.217.129

配置 rsync 源服务器 ：

1.默认Linux 安装 ：

[[email protected] ~]# rpm -q rsync
rsync-3.0.9-18.el7.x86_64

2.配置 rsync 配置文件 ：

vim /etc/rsyncd.conf 

 uid = nobody
 gid = nobody
 use chroot = yes                     #禁锢在家目录
 address = 192.168.217.128            #监听地址
 port 873                             #监听端口
 log file = /var/log/rsyncd.log       #日志文件位置
 pid file = /var/run/rsyncd.pid       #pid文件位置
 hosts allow = 192.168.217.0/24       #允许访问的客户机地址

 [wwwroot]                            #共享模块名称
 path = /var/www/html                 #源目录的实际路径
 comment = www.kgc.cn                 #描述信息
 read only = yes                      #是否为只读   允许上传需注释
 dont compress   = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2 #同步时不在压缩的文件类型
 auth users = backuper                #授权账户                 匿名访问注释
 secrets file = /etc/rsyncd_users.db  #存放账户信息的数据文件    匿名访问注释

3.创建授权账户信息 ：

vim /etc/rsyncd_users.db
backuper:abc123                 #用户名和密码

chmod 600 /etc/rsyncd_users.db  #只允许root用户读写 

mkdir -p /var/www/html    #没有创建 有无视

4.启动 rsync 服务 ：

rsync --daemon    rsync#启动rsync

netstat -antp | grep rsync   # 关闭服务使用 kill
tcp        0      0 192.168.217.128:873     0.0.0.0:*     LISTEN      17059/rsync  

5.在客户端下载 ：

1.在源服务器创建文本 ：

 echo "123" > /var/www/html/test.txt   #在源服务器写

2.在客户端下载 ：

[[email protected] ~]# rsync -avz [email protected]::wwwroot /opt/  #下载到opt
Password: 
receiving incremental file list
./
test.txt

sent 83 bytes  received 158 bytes  68.86 bytes/sec
total size is 4  speedup is 0.02

3.免交互 ：

vim /etc/server.pass
abc123                      #写入密码

chmod 600 /etc/server.pass

rsync -az  --password-file=/etc/server.pass [email protected]::wwwroot /opt     #免交互

配置 rsync+inotify 实时同步 ：

1.调整 inotify 内核参数 ：

vim /etc/sysctl.conf

fs.inotify.max_queued_events = 16384   #监控事件列队
fs.inotify.max_user_instances = 1024   #最多监控实例数
fs.inotify.max_user_watches = 1048576  #每个实例最多监控文件数

sysctl -p  #立即生效

2.安装 inotify-tools ：

yum install gcc gcc-c++ make -y

tar zxvf inotify-tools-3.14.tar.gz -C /opt/

cd /opt/inotify-tools-3.14

./configure

make && make install

3.监控目录 ：

inotifywait -mrq -e modify,create,move,delete /var/www/html/  #监控 /var/www/html/ 目录
# 参数说明 ： 
-m 持续监控
-r 地柜整个目录
-q 简化输出信息

modify 修改
create 创建
move   移动
delete 删除

#复制会话，重新打开一个远程，链接到装有 inotify-tools 
[[email protected] ~]# cd /opt/
[[email protected] opt]# mkdir test
[[email protected] opt]# touch 1.test

#打开监视会话，显示目录下文件变动情况
[[email protected] inotify-tools-3.14]# inotifywait -mrq -e modify,create,move,delete /var/www/html/
/var/www/html/ CREATE,ISDIR test
/var/www/html/ CREATE 1.test

4.编写触发式同步脚本 ：

• 1.在源服务器配置开启上传 ：

vim /etc/rsyncd.conf
read only = no    # 改成 no 

netstat -antp | grep rsync
tcp        0      0 192.168.217.128:873     0.0.0.0:*       LISTEN      16501/rsync

kill 16501

rsync --daemon

• 2.编写脚本 ：

vim /opt/inotify.sh

#!/bin/bash
INOTIFY_CMD="inotifywait -mrq -e modify,create,attrib,move,delete /var/www/html/"
RSYNC_CMD="rsync -azH --delete --password-file=/etc/server.pass /var/www/html/ [email protected]::wwwroot/"
$INOTIFY_CMD | while read DIRECTORY EVENT FILE
do
    if [ $(pgrep rsync | wc -l) -le 0 ] ; then
        $RSYNC_CMD
    fi
done

chmod +x /opt/inotify.sh

注意：上传到源服务器时 ，源服务器 html 的属主属组要和配置文件的 uid gid 相同，不然无法上传 。