rsync与inotify实现数据实时同步
Posted
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了rsync与inotify实现数据实时同步相关的知识,希望对你有一定的参考价值。
Rsync与Inotify
单一的rsync只可以进行数据同步,单一的inotify只可以实时监控文件,两者结合使用刚好满足数据实时同步的需求,下面就用一个数据发布服务器和两个web服务器实例解析rsync+inotify实现实时同步。
数据发布服务器 192.168.1.5 (rsync+inotify)
web服务器 192.168.1.6 192.168.1.7 (rsync)
首先在web服务器上部署rsync
192.168.1.6配置
[[email protected]~]# yum install -y rsync
[[email protected]~]# mkdir -p /var/www/001
[[email protected]~]# chmod 660 /var/www/001
[[email protected]~]# chown nobody.nobody /var/www/001
[[email protected]~]# vim /etc/rsync.conf
transfer logging = yes
log file = /var/log/rsyncd.log
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
uid = nobody
gid = nobody
user chroot = no
ignore errors
read only = no
[web1]
comment = Web comment
path = /var/www/001
auth users = tom
secrets file = /etc/rsyncd.passwd
hosts allow=192.168.1.5
hosts deny=*
list = false
[[email protected]~]# echo "tom:123456" > /etc/rsyncd.passwd
[[email protected]~]# chmod 600 /etc/rsyncd.passwd
[[email protected]~]# rsync --daemon
[[email protected]~]# echo "rsync --daemon" >> /etc/rc.local
[[email protected]~]# iptables -I INPUT -p tcp --dport 873 -j ACCEPT
[[email protected]~]# service iptables save
192.168.1.7配置
[[email protected]~]# yum install -y rsync
[[email protected]~]# mkdir -p /var/www/002
[[email protected]~]# chmod 660 /var/www/002
[[email protected]~]# chown nobody.nobody /var/www/002
[[email protected]~]# vim /etc/rsync.conf
transfer logging = yes
log file = /var/log/rsyncd.log
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
uid = nobody
gid = nobody
user chroot = no
ignore errors
read only = no
[web2]
comment = Web comment
path = /var/www/002
auth users = tom
secrets file = /etc/rsyncd.passwd
hosts allow=192.168.1.5
hosts deny=*
list = false
[[email protected]~]# echo "tom:123456" > /etc/rsyncd.passwd
[[email protected]~]# chmod 600 /etc/rsyncd.passwd
[[email protected]~]# rsync --daemon
[[email protected]~]# echo "rsync --daemon" >> /etc/rc.local
[[email protected]~]# iptables -I INPUT -p tcp --dport 873 -j ACCEPT
[[email protected]~]# service iptables save
接着在数据发布服务器下载inotify-tool,安装rsync和inotify (192.168.1.5)
[[email protected]~]# yum install -y rsync
[[email protected]~]# yum install -y automake libtool
[[email protected]~]# cd /home/soft/inotify-tools-master
[[email protected] inotify-tools-master~]# ./configure
[[email protected] inotify-tools-master~]# make && make install
[[email protected]~]# echo "123456" > /root/rsync.pass
[[email protected]~]# chmod 600 /root/rsync.pass
[[email protected]~]# vim rsync_notify.sh
#!/bin/bash
export PATH=/bin:/usr/bin:/usr/local/bin
SRC=/home/webdata/
DEST1=web1
DEST2=web2
Client1=192.168.1.6
Client2=192.168.1.7
User=tom
Passfile=/root/rsync.pass
[ ! -e $Passfile ] && exit 2
inotifywait -mrq --timefmt ‘%Y-%m-%d %H:%M‘ --format ‘%T %w%f %e‘ --event modify,create,delete,attrib $SRC|while read line
do
echo "$line" > /var/log/inotify_web 2>&1
/usr/bin/rsync -avz --delete --progress --password-file=$Passfile $SRC ${User}@$Client1::$DEST1 >> /var/log/sync_web1 2>&1
/usr/bin/rsync -avz --delete --progress --password-file=$Passfile $SRC ${User}@$Client2::$DEST2 >> /var/log/sync_web2 2>&1
done &
[[email protected]~]# chmod a+x rsync_notify.sh
[[email protected]~]# ./rsync_notify.sh
[[email protected]~]# echo "/root/rsync_notify.sh" /etc/rc.local
inotifywait用法
inotifywait [-hcmrq] [-e ] [-t ] [--format ] [--timefmt ] [ ... ]
参数:
-h,–help
输出帮助信息
@
排除不需要监视的文件,可以是相对路径,也可以是绝对路径。
–fromfile
从文件读取需要监视的文件或排除的文件,一个文件一行,排除的文件以@开头。
-m, –monitor
接收到一个事情而不退出,无限期地执行。默认的行为是接收到一个事情后立即退出。
-d, –daemon
跟–monitor一样,除了是在后台运行,需要指定–outfile把事情输出到一个文件。也意味着使用了–syslog。
-o, –outfile
输出事情到一个文件而不是标准输出。
-s, –syslog
输出错误信息到系统日志
-r, –recursive
监视一个目录下的所有子目录。
-q, –quiet
指定一次,不会输出详细信息,指定二次,除了致命错误,不会输出任何信息。
–exclude
正则匹配需要排除的文件,大小写敏感。
–excludei
正则匹配需要排除的文件,忽略大小写。
-t , –timeout
设置超时时间,如果为0,则无限期地执行下去。
-e , –event
指定监视的事件。
-c, –csv
输出csv格式。
–timefmt
指定时间格式,用于–format选项中的%T格式。
–format
指定输出格式。
%w 表示发生事件的目录
%f 表示发生事件的文件
%e 表示发生的事件
%Xe 事件以“X”分隔
%T 使用由–timefmt定义的时间格式
本文出自 “实用Linux知识技能分享” 博客,请务必保留此出处http://superleedo.blog.51cto.com/12164670/1889742
以上是关于rsync与inotify实现数据实时同步的主要内容,如果未能解决你的问题,请参考以下文章