rsync(下行同步)与inotify(实时同步)

Posted 谷雨道长

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了rsync(下行同步)与inotify(实时同步)相关的知识,希望对你有一定的参考价值。

@[toc]

一、rsync简介

一款快速增量备份工具

Remote Sync,远程同步
支持本地复制,或者与其他SSH、rsync主机同步
官方网站:https://rsync.samba.org/

二、rsync同步源

rsync同步源
指备份操作的远程服务器,也称为备份源
例:
A服务器同步B服务器的数据,B服务器就是备份源
反过来,B服务器同步A服务器的数据,那么A服务器就是备份源

三、配置rsync源

1、基本思路

建立rsyncd.conf配置文件、独立的账号文件
启用rsync的 --daemon模式

2、配置文件rsyncd.conf

认证配置auth users、secrets file,不加则为匿名

3、独立的账号文件

用户名:密码
每行一个用户记录
独立的账号数据,不依赖系统账号

4、启用rsync服务

通过 --daemon独自提供服务,rsync --daemon
执行kill $(cat /var/run/rsyncd.pid)关闭服务

四、rsync命令

==命令使用语法==

rsync 【选项】原始位置 目标位置

==常用选项==

-a 归档模式,递归并保留对象属性,等同于-rlptgoD
-v 显示同步过程的详细信息
-z 在传输时进行压缩
-H 保留硬链接文件
-A 保留ACL属性信息
- -delete 删除目标位置有而原始位置没有的文件
- -checksum 根据对象的校验和来决定是否跳过文件
…… ……

–delete的作用简单来说,就是删除差异文件,保留一致性

五、配置源的两种表达方式

格式一:

用户名@主机地址::共享模块名

格式二:

rsync://用户名@主机地址/共享模块名

六、inotify简介

可以监控文件系统的变动情况,并做出通知响应

  • 调整inotify内核参数(优化)

  • /etc/sysctl.conf(内核参数配置文件)

    max_queue_events        #监控事件队列大小
    max_user_instances      #最多监控实例数
    max_user_watches        #每个实例最多监控文件数  
  • inotifywait:用于持续监控,实时输出结果

  • inotifywatch:用于短期监控,任务完成后再输出结果

例:

inotifywait -mrq -e modify,create,move,delete /var/www/html
-m 持续进行监控
-r 递归监控所有子对象
-q 简化输出信息
-e 指定要监控哪些事件类型
modify 修改
create 创建
move 移动
delete 删除

七、配置rsync下行同步

==环境配置==

主机 操作系统 IP地址 软件 / 安装包 / 工具
Master CentOS 7 192.168.19.10 rsync
slave CentOS 7 192.168.19.11 rsync / inotify-tools-3.14.tar.gz

下行同步:将master服务器数据备份到slave服务器

==1、Master(192.168.19.10)==

systemctl stop firewalld.service 
setenforce 0

yum -y install httpd rsync 

vim /etc/rsyncd.conf 

uid = nobody
gid = nobody
use chroot = yes                                                
address = 192.168.184.10
port 873                                                                
log file = /var/log/rsyncd.log                  
pid file = /var/run/rsyncd.pid                  
hosts allow = 192.168.184.0/24
[wwwroot]                                                               
path = /var/www/html                                    
comment = Document Root of www.lic.com
read only = yes                                                  
dont comperss = *.gz *.bz2 *.tgz *.zip *.rar *.z        
auth users = kiki                                               
secrets file = /etc/rsyncd_users.db             


vim /etc/rsyncd_users.db
jingjing:123123

chmod 600 /etc/rsyncd_users.db

rsync --daemon
netstat -natp | grep rsync

cd /var/www/html
touch aaa.html bbb.html
ls



2、==Slave(192.168.19.11)==

systemctl stop firewalld.service 
setenforce 0

yum -y install rsync

cd /opt
mkdir haha
chmod 777 haha

vim /etc/server.pass
123123

chmod 600 /etc/server.pass 

rsync -az --delete --password-file=/etc/server.pass jingjing@192.168.19.10::wwwroot /opt/haha

ls haha

八、rsync+inotify实时同步

==1、Master(192.168.19.10)==

vim /etc/rsyncd.conf
read only = no

kill `cat /var/run/rsyncd.pid`
netstat -natp | grep rsync

rsync --daemon
netstat -natp | grep rsync

chmod 777 /var/www/html


==2、Slave(192.168.19.11)==

cat /proc/sys/fs/inotify/max_queued_events
cat /proc/sys/fs/inotify/max_user_instances 
cat /proc/sys/fs/inotify/max_user_watches 

vim /etc/sysctl.conf 

fs.inotify.max_queued_events = 32768
fs.inotify.max_user_instances = 1024
fs.inotify.max_user_watches = 1048576

sysctl -p

yum -y install gcc gcc-c++ 

#放入安装包
tar zxvf inotify-tools-3.14.tar.gz -C /opt

cd /opt/inotify-tools-3.14/

./configure
make && make install

vim /opt/inotify.sh
#!/bin/bash
INOTIFY_CMD="inotifywait -mrq -e create,delete,move,modify,attrib /opt/haha/"
RSYNC_CMD="rsync -azH --delete --password-file=/etc/server.pass /opt/haha/ jingjing@192.168.19.10::wwwroot"

$INOTIFY_CMD | while read DIRECTORY EVENT FILE
do
    if [ $(pgrep rsync | wc -l) -le 0 ] ; then
        $RSYNC_CMD
    fi
done

cd /opt/
chmod +x inotify.sh 
./inotify.sh 

cd /opt/haha
touch ccc.html
rm -rf aaa.html


==Master(192.168.19.10)验证==

vim /etc/rsyncd.conf
把nobady修改为root
cd /var/www/html
ls

==Slave(192.168.19.11)==

==Master(192.168.19.10)==

以上是关于rsync(下行同步)与inotify(实时同步)的主要内容,如果未能解决你的问题,请参考以下文章

rsync下行同步+inotify实时同步部署

rsync下行同步rsync+inotify实时同步(同步如饮水一样简单)

rsync远程同步:下行同步上行同步+inotify实时同步

Rsync远程同步,实现下行 ,上行异地备份。配置rsync+inotify实时备份。

rsync + inotify 实时同步附送源码包

rsync+inotify实现上行实时同步