rsync & sersyncs 两台服务器双向文件同步实现

Posted 2021-09-06 dingwen_blog

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了rsync & sersyncs 两台服务器双向文件同步实现相关的知识，希望对你有一定的参考价值。

文章目录

1. 文件说明

机器名称	IP	本机目录	需同步机器IP	同步目录
业务网前置机	192.168.233.135	/home/recv	192.168.233.134	/home/recv
业务网	192.168.233.134	/home/send	192.168.233.135	/home/send

2.安装`rsync`

两台机器都安装

yum install -y rsync

3. 配置秘钥密码文件

两台机器都设置

# 指定本机作为rsync服务时的秘钥文件，指定访问的用户以及密码 
vi /etc/rsyncd.passwd     #内容格式 用户名:密码            rsync:123456 

# 指定本机作为rsync客户端是的密码文件，携带密码去请求rsync服务
# 用户名为发送文件时指定
vi /root/rsyncd.passwd    #内容格式 密码                  123456

4.`rsync`配置

4.1 业务网前置机

rsync客户端配置，相对于自己是客户端，同时作为业务网的服务器

uid = root
gid = root
use chroot = 0
#post rsync使用的端口号
port = 873
##允许那些IP访问
hosts allow = 192.168.233.134
#hosts allow = * 
max connections = 0
timeout = 300
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsyncd.lock
log file = /var/log/rsyncd.log
log format = %t %a %m %f %b
transfer logging = yes
syslog facility = local3
##方括号中为模块名称
[ywwqzj]
##指定当前模块在rsync服务器上的同步路径
path = /home/send/
##注释，可以同模块名一样
comment = "业务网前置机"
ignore errors
##是否允许客户端上传文件
read only = no
list = no
##指定由空格或逗号分隔的用户名列表，只有这些用户才允许连接该模块
auth users = rsync
##保存密码和用户名文件，需要自己生成
secrets file = /etc/rsyncd.passwd

4.2 业务网

rsync客户端配置，相对于自己是客户端，同时作为业务网的服务器

uid=root
gid=root
use chroot=0
#post rsync使用的端口号
port=873
##允许访问的IP
hosts allow=192.168.233.135
#hosts allow = * 
max connections=0
timeout=300
pid file=/var/run/rsyncd.pid
lock file=/var/run/rsyncd.lock
log file=/var/log/rsyncd.log
log format=%t %a %m %f %b
transfer logging=yes
syslog facility=local3
##方括号中为模块声明，对应命名
[yww]
##指定当前模块在rsync服务器上的同步路径
path=/home/recv/
##注释，可以同模块名一样
comment="业务网"
ignore errors
##是否允许客户端上传文件
read only=no
list=no
##指定由空格或逗号分隔的用户名列表，只有这些用户才允许连接该模块
auth users=rsync
##保存密码和用户名文件，需要自己生成
secrets file=/etc/rsyncd.passwd

5. 秘钥以及密码文件赋予权限

两台机器都需要配置

chmod 600 /etc/rsyncd.passwd
chmod 600 /root/rsyncd.passwd

6. 启动`rsync`服务

#以守护进程方式启动rsync服务
/usr/bin/rsync --daemon --config=/etc/rsyncd.conf

7. 验证同步

7.1 业务网前置机 --> 业务网

业务网前置机： /home/recv --> 业务网：/home/recv

业务网前置机： /home/recv 目录下创建文件
执行命令
- rsync -vzrtopg --delete --progress /home/recv/ rsync@192.168.233.134::yww --password-file=/root/rsyncd.passwd
检查业务网：/home/recv

7.2 业务网 --> 业务网前置机

业务网： /home/send --> 业务网：/home/send

业务网前置机： /home/send目录下创建文件
执行命令
- rsync -vzrtopg --delete --progress /home/send/ rsync@192.168.233.135::ywwqzj --password-file=/root/rsyncd.passwd
检查业务网：/home/send

8. 安装`sersync`

两台服务器都装

8.1 下载整个`master zip`

地址： https://github.com/orangle/sersync

8.2 安装

unzip sersync-master.zip 
tar xf sersync-master/release/sersync2.5.4_64bit_binary_stable_final.tar.gz -C /usr/local/
cd /usr/local/
mv GNU-Linux-x86/ sersync
cd sersync/
cp confxml.xml confxml.xml.$(date +%F)

8.3 配置

vim confxml.xml

8.3.1 业务网

<?xml version="1.0" encoding="ISO-8859-1"?>
<head version="2.5">
    <host hostip="localhost" port="8008"></host>
    <debug start="false"/>
    <fileSystem xfs="false"/>
    <filter start="false">
        <exclude expression="(.*)\\.svn"></exclude>
        <exclude expression="(.*)\\.gz"></exclude>
        <exclude expression="^info/*"></exclude>
        <exclude expression="^static/*"></exclude>
    </filter>
    <inotify>
        <delete start="true"/>
        <createFolder start="true"/>
        <createFile start="false"/>
        <closeWrite start="true"/>
        <moveFrom start="true"/>
        <moveTo start="true"/>
        <attrib start="false"/>
        <modify start="false"/>
    </inotify>

    <sersync>
        <!--监控本机目录-->
        <localpath watch="/home/send">
            <!--rsync服务IP 模块名称-->
            <remote ip="192.168.233.135" name="ywwqzj"/>
        </localpath>
        <rsync>
            <commonParams params="-vzrtopg"/>
            <!--指定用户名和密码文件-->
            <auth start="true" users="rsync" passwordfile="/root/rsyncd.passwd"/>
            <!--rsync服务端口-->
            <userDefinedPort start="false" port="873"/>
            <timeout start="false" time="100"/>
            <ssh start="false"/>
        </rsync>
        <failLog path="/tmp/rsync_fail_log.sh" timeToExecute="60"/>
        <crontab start="false" schedule="600">
            <crontabfilter start="false">
                <exclude expression="*.php"></exclude>
                <exclude expression="info/*"></exclude>
            </crontabfilter>
        </crontab>
        <plugin start="false" name="command"/>
    </sersync>

    <plugin name="command">
        <param prefix="/bin/sh" suffix="" ignoreError="true"/> 
        <filter start="false">
            <include expression="(.*)\\.php"/>
            <include expression="(.*)\\.sh"/>
        </filter>
    </plugin>

    <plugin name="socket">
        <localpath watch="/opt/tongbu">
            <deshost ip="192.168.138.20" port="8009"/>
        </localpath>
    </plugin>
    <plugin name="refreshCDN">
        <localpath watch="/data0/htdocs/cms.xoyo.com/site/">
            <cdninfo domainname="ccms.chinacache.com" port="80" username="xxxx" passwd="xxxx"/>
            <sendurl base="http://pic.xoyo.com/cms"/>
            <regexurl regex="false" match="cms.xoyo.com/site([/a-zA-Z0-9]*).xoyo.com/images"/>
        </localpath>
    </plugin>
</head>

8.3.2 业务网前置机

<?xml version="1.0" encoding="ISO-8859-1"?>
<head version="2.5">
    <host hostip="localhost" port="8008"></host>
    <debug start="false"/>
    <fileSystem xfs="false"/>
    <filter start="false">
        <exclude expression="(.*)\\.svn"></exclude>
        <exclude expression="(.*)\\.gz"></exclude>
        <exclude expression="^info/*"></exclude>
        <exclude expression="^static/*"></exclude>
    </filter>
    <inotify>
        <delete start="true"/>
        <createFolder start="true"/>
        <createFile start="false"/>
        <closeWrite start="true"/>
        <moveFrom start="true"/>
        <moveTo start="true"/>
        <attrib start="false"/>
        <modify start="false"/>
    </inotify>

    <sersync>
        <localpath watch="/home/recv">
            <remote ip="192.168.233.134" name="yww"/>
        </localpath>
        <rsync>
            <commonParams params="-vzrtopg"/>
            <auth start="true" users="rsync" passwordfile="/root/rsyncd.passwd"/>
            <userDefinedPort start="false" port="873"/>
            <timeout start="false" time="100"/>
            <ssh start="false"/>
        </rsync>
        <failLog path="/tmp/rsync_fail_log.sh" timeToExecute="60"/>
        <crontab start="true" schedule="600">
            <crontabfilter start="false">
                <exclude expression="*.php"></exclude>
                <exclude expression="info/*"></exclude>
            </crontabfilter>
        </crontab>
        <plugin start="false" name="command"/>
    </sersync>

    <plugin name="command">
        <param prefix="/bin/sh" suffix="" ignoreError="true"/> 
        <filter start="false">
            <include expression="(.*)\\.php"/>
            <include expression="(.*)\\.sh"/>
        </filter>
    </plugin>

    <plugin name="socket">
        <localpath watch="/opt/tongbu">
            <deshost ip="192.168.233.20" port="8009"/>
        </localpath>
    </plugin>
    <plugin name="refreshCDN">
        <localpath watch="/data0/htdocs/cms.xoyo.com/site/">
            <cdninfo domainname="ccms.chinacache.com" port="80" username="xxxx" passwd="xxxx"/>
            <sendurl base="http://pic.xoyo.com/cms"/>
            <regexurl regex="false" match="cms.xoyo.com/site([/a-zA-Z0-9]*).xoyo.com/images"/>
        </localpath>
    </plugin>
</head>

9. 启动`sersync`

./sersync2 -d -r -o /usr/local/sersync/confxml.xml

10. 创建文件测试同步

以上是关于rsync & sersyncs 两台服务器双向文件同步实现的主要内容，如果未能解决你的问题，请参考以下文章

rsync同步

Rsync+Sersync实时同步

rsync+sersync实现文件实时同步

Sersync实现触发式文件同步替代inotify和rsync

sersync+rsync实现服务器文件实时同步

rsync & sersyncs 两台服务器双向文件同步实现

文章目录

1. 文件说明

2.安装rsync

3. 配置秘钥密码文件

4.rsync配置

4.1 业务网前置机

4.2 业务网

5. 秘钥以及密码文件赋予权限

6. 启动rsync服务

7. 验证同步

7.1 业务网前置机 --> 业务网

7.2 业务网 --> 业务网前置机

8. 安装sersync

8.1 下载整个master zip

8.2 安装

8.3 配置

8.3.1 业务网

8.3.2 业务网前置机

9. 启动sersync

10. 创建文件测试同步

2.安装`rsync`

4.`rsync`配置

6. 启动`rsync`服务

8. 安装`sersync`

8.1 下载整个`master zip`

9. 启动`sersync`