rsync+inotify

Posted winter1519

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了rsync+inotify相关的知识,希望对你有一定的参考价值。

公司需要用到备份文件,因此整理了一篇文章,希望对读者有所帮助。

工作环境:

主机名 IP 操作系统 版本
openstack 192.168.199.7 rhel7.4 rsync  version 3.0.9
node2 192.168.199.8 rhel7.4 rsync  version 3.0.9

rhel7版本已经默认装了rsync。

编译rsync服务的主配置文件:

[[email protected] ~]# vim /etc/rsyncd.conf

  1 # /etc/rsyncd: configuration file for rsync daemon mode
  2
  3 # See rsyncd.conf man page for more options.
  4
  5 # configuration example:
  6
  7 uid = nobody
  8 gid = nobody
  9 address = 192.168.199.7
 10 port = 873
 11 hosts allow = 192.168.199.8
 12 use chroot = yes   #用户登录进来只在固定的目录里
 13 max connections = 4
 14 pid file = /var/run/rsyncd.pid
 15 lock file = /var/run/rsyncd.lock
 16 log file = /var/run/rsyncd.log
 17 motd file = /etc/rsyncd.motd
 18 [wwwroot]
 19 path = /essfiles/
 20 comment = database
 21 read only = yes
 22 list = yes
 23 auth users = rsyncuser
 24 secrets file = /etc/rsync.password
[[email protected] ~]# vim /etc/rsync.password
rsyncuser:passwd123

[[email protected] ~]# chmod 600 /etc/rsync.password
[[email protected] ~]# vim /etc/rsyncd.motd
welcome to back zjbq_file
[[email protected] ~]# rsync --daemon
[[email protected] ~]# ps -aux|grep rsync
root       6405  0.0  0.0 114652   312 ?        Ss   10:40   0:00 rsync --daemon
root      58231  0.0  0.0 112680   984 pts/2    S+   13:46   0:00 grep --color=auto rsync
创建需要备份的目录

[[email protected] ~]# mkdir /essfiles/

创建测试数据:

[[email protected] ~]# mkdir /essfiles/{1..10}.txt
[[email protected] ~]# ll /essfiles/
总用量 0
drwxr-xr-x. 2 root root 6 11月 18 13:51 10.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 1.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 2.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 3.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 4.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 5.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 6.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 7.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 8.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 9.txt

然后在备份服务器上进行备份:

[[email protected] ~]# mkdir /essfiles-back/    创建备份的目录
[[email protected] essfiles-back]# rsync -avz [email protected]::wwwroot /essfiles-back/   进行备份,此时是需要输入密码的。
welcome to back zjbq_file

Password:
receiving incremental file list
./
1.txt/
10.txt/
2.txt/
3.txt/
4.txt/
5.txt/
6.txt/
7.txt/
8.txt/
9.txt/

sent 105 bytes  received 299 bytes  62.15 bytes/sec
total size is 0  speedup is 0.00
[[email protected] essfiles-back]#

[[email protected] essfiles-back]# ll   查看文件已经备份过来了。
总用量 0
drwxr-xr-x. 2 root root 6 11月 18 2018 10.txt
drwxr-xr-x. 2 root root 6 11月 18 2018 1.txt
drwxr-xr-x. 2 root root 6 11月 18 2018 2.txt
drwxr-xr-x. 2 root root 6 11月 18 2018 3.txt
drwxr-xr-x. 2 root root 6 11月 18 2018 4.txt
drwxr-xr-x. 2 root root 6 11月 18 2018 5.txt
drwxr-xr-x. 2 root root 6 11月 18 2018 6.txt
drwxr-xr-x. 2 root root 6 11月 18 2018 7.txt
drwxr-xr-x. 2 root root 6 11月 18 2018 8.txt
drwxr-xr-x. 2 root root 6 11月 18 2018 9.txt

上面的备份是需要输入密码的,此时在本地设置一个密码文件,然后指定密码文件就可以免密了。
[[email protected] ~]# vim /etc/rsync.password   
passwd123

[[email protected] essfiles-back]# rm -rf *     删掉之前的数据
[[email protected] essfiles-back]# ll
总用量 0
[[email protected] essfiles-back]# rsync -avz [email protected]::wwwroot --password-file=/etc/rsync.password /essfiles-back/
welcome to back zjbq_file

receiving incremental file list
./
1.txt/
10.txt/
2.txt/
3.txt/
4.txt/
5.txt/
6.txt/
7.txt/
8.txt/
9.txt/

sent 105 bytes  received 299 bytes  808.00 bytes/sec
total size is 0  speedup is 0.00
[[email protected] essfiles-back]# ll
总用量 0
drwxr-xr-x. 2 root root 6 11月 18 13:51 10.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 1.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 2.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 3.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 4.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 5.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 6.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 7.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 8.txt
drwxr-xr-x. 2 root root 6 11月 18 13:51 9.txt
此时就可以免密备份了。

使用脚本自动备份:

[[email protected] ~]# vim rsync.sh
#!/bin/bash
rsync -avz [email protected]::wwwroot --password-file=/etc/rsync.password /essfiles-back/

[[email protected] ~]# chmod +x rsync.sh
然后加入计划任务就可以实现自动备份了。

rsync+inotify实时同步

Linux 内核从 2.6.13 版本开始提供了 inotify 通知接口,用来监控文件系统的各种变化情况,如文件存取、删除、移动等。利用这一机制,可以非常方便地实现文件异动告警、增量备份,并针对目录或文件的变化及时作出响应。

 [[email protected] ~]# uname -r   查看内核版本
3.10.0-693.el7.x86_64

安装inotify-tools工具

可以yum安装也可以进行编译安装

这里进行编译安装

[[email protected] ~]# tar zxvf inotify-tools-3.13.tar.gz -C /usr/local/src/
[[email protected] src]# cd inotify-tools-3.13/
[[email protected] inotify-tools-3.13]# ./configure --prefix=/usr/local/inotify-tools && nake && make install
设置软连接或者加入到环境变量中,这样方便调用。
[[email protected] ~]# tail -n 1 /etc/profile
export PATH=/usr/local/inotify-tools/bin:$PATH

[[email protected] ~]# source /etc/profile    使生效。
或者设置软链接

[[email protected] ~]# ln -s /usr/local/inotify-tools/bin/* /usr/bin/

inotifywait常用参数:

-e  用来指定要监控哪些事件。这些事件包括: create 创建,move 移动,delete 删除,modify 修改文件内容,attrib 属性更改。

-m 表示持续监控

-r  表示递归整个目录

-q 表示简化输出信息。



























































































































以上是关于rsync+inotify的主要内容,如果未能解决你的问题,请参考以下文章

rsync结合inotify实现数据自动同步

实时备份工具之inotify+rsync

Linux 文件同步

文件实时同步后防篡改的操作记录

如何实现linux负载均衡集群文件同步?

三十 rsync工具介绍rsync常用选项rsync通过ssh同步