配置 inotify+rsync 实时同步

Posted 2020-11-10

rsync 虽然可以实现快速备份，但是什么东西都不可能是十全十美的，作为计划任务备份，都是固定时间进行的，而且延迟明显、实时性差，当同步源长期不变化时，密集的定期任务是不必要的。
实时备份就不同了，一旦同步源出现变化，立即启动备份，只要同步源无变化，则不执行备份，但是他只能实现上传功能。
Linux内核提供了inotify通知接口，用来监控文件系统的各种变化情况，如文件存取、删除、移动、修改等。利用这个机制，可以非常方便地实现文件异动告警、增量备份，并针对目录或文件的变化及时作出响应。

将inotify机制和rsync工具相结合，可以实现触发式备份（实时同步）——只要原始位置的文档发生变化，则立即启动增量备份操作，否则处于静默状态，这样，避免了周期性备份时存在的延迟性、周期过密等问题。

在Linux内核中，默认的inotify机制提供了三个调控参数：

[root@localhost myweb]# cat /proc/sys/fs/inotify/max_queued_events 
16384                   #监控事件队列数
[root@localhost myweb]# cat /proc/sys/fs/inotify/max_user_instances 
128                       #最多监控实例数
[root@localhost myweb]# cat /proc/sys/fs/inotify/max_user_watches 
8192                      #每个实例最多监控文件数

当要监控的目录、文件数量较多或者变化比较频繁时，建议通过修改“ /etc/sysctl.conf ”加大这三个参数(标准是1024的倍数)：

[root@localhost myweb]# vim /etc/sysctl.conf 
                 ..............................
fs.inotify.max_queued_events = 32768
fs.inotify.max_user_instances = 1024
fs.inotify.max_user_watches = 1048576

[root@localhost myweb]# sysctl -p              #更新并查看该参数是否生效
fs.inotify.max_queued_events = 32768
fs.inotify.max_user_instances = 1024
fs.inotify.max_user_watches = 1048576

接下来的操作接着上一篇配置rsync服务器的环境，以及配置，上一篇博文链接：
https://blog.51cto.com/14227204/2431539
现在所有的操作是基于server B（192.168.1.2）这台服务器的：

1、安装inotify-tools：
获取源码包：
https://pan.baidu.com/s/1_xSEDdXiRhd9lDOzVTbm4w
提取码: s3rj

解包并安装：

[root@localhost media]# tar zxf inotify-tools-3.14.tar.gz -C /usr/src
[root@localhost media]# cd /usr/src/inotify-tools-3.14/
[root@localhost inotify-tools-3.14]# ./configure && make && make install

2、安装后即可使用，现在以监控server B上的/var/www/html目录：

[root@localhost /]# inotifywait -mrq -e modify,create,move,attrib,delete /var/www/html
该命令的具体选项解释如下：

-e：指定要监控哪些事件；
-m：表示持续监控；
-r：表示递归整个目录；
-q：简化输出信息；
modify：修改；
create：创建；
move：移动；
delete：删除；
attrib：属性更改；

现在切换一个终端，在监控的目录下新建一个1.html文件，则该终端的监控命令下就会提示相关信息，提示如下：：

[root@localhost /]# inotifywait -mrq -e modify,create,move,attrib,delete /var/www/html
/var/www/html/ CREATE 1.html
/var/www/html/ ATTRIB 1.html

3、现在可以编写一个脚本来实现实时同步：

[root@localhost /]# vim /opt/inotify_sync.sh

#!/bin/bash
inotify_cmd="inotifywait -mrq -e modify,create,attrib,move,delete /var/www/html/"
rsync_cmd="rsync -azH --delete --password-file=/etc/server.pass /var/www/html/* backuper@192.168.1.1::wwwroot"
$inotify_cmd | while read DIRECTORY EVENT FILE
do
        $rsync_cmd
done

[root@localhost /]# chmod +x /opt/inotify_sync.sh 
[root@localhost /]# echo ‘/opt/inotify_sync.sh &‘ >> /etc/rc.d/rc.local            #设置开机自动运行该脚本
[root@localhost /]#chmod a+x /etc/rc.d/rc.local
[root@localhost /]#init 6
[root@localhost /]#pgrep inotify_sync.sh         #重启后，可以使用此命令查看脚本是否在运行，如果在运行，会显示其进程号
1033
1099

验证该脚本是否生效的过程如下：

在本机 server B上运行/opt/inotify_rsync.sh脚本程序。
切换到本机的/var/www/html/目录，执行增加、删除、修改文件等操作。
查看server A服务器中/var/www/html/目录下的变化情况。
注意事项：

记得测试下脚本是否有编写错误，可手动执行下脚本，测试是否生效，若有报错信息，可将脚本里的命令复制出来，执行一下，看命令是否有错误，并且注意两台服务器的目录相关权限问题，如是否可读可写等。
rsync服务器上的配置项须设置为 read only = no。