实现数据实时同步

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了实现数据实时同步相关的知识,希望对你有一定的参考价值。

一、为什么要用rsync+sersync架构?

1、sersync是基于inotify开发的,类似于inotify-tools的工具

2、sersync可以记录下被监听目录中发生变化的(包括增加、删除、修改)具体某一个文件或者某一个目录的名字,然后使用rsync同步的时候,只同步发生变化的文件或者目录

二、rsync+inotify-tools与rsync+sersync架构的区别?

1、rsync+inotify-tools
a、inotify只能记录下被监听的目录发生了变化(增,删,改)并没有把具体是哪个文件或者哪个目录发生了变化记录下来;
b、rsync在同步的时候,并不知道具体是哪个文件或目录发生了变化,每次都是对整个目录进行同步,当数据量很大时,整个目录同步非常耗时(rsync要对整个目录遍历查找对比文件),因此效率很低

2、rsync+sersync
a、sersync可以记录被监听目录中发生变化的(增,删,改)具体某个文件或目录的名字;
b、rsync在同步时,只同步发生变化的文件或目录(每次发生变化的数据相对整个同步目录数据来说很小,rsync在遍历查找对比文件时,速度很快),因此效率很高。

同步过程:

  1. 在同步服务器上开启sersync服务,sersync负责监控配置路径中的文件系统事件变化; 实际上sersync就是监控本地的数据写入或更新事件,通过rsync推送到目标服务器。
  2. 调用rsync命令把更新的文件同步到目标服务器;
  3. 需要在主服务器配置sersync,在同步目标服务器配置rsync server(注意:是rsync服务)

    同步过程和原理:

  4. 用户实时的往sersync服务器上写入更新文件数据;
  5. 此时需要在同步主服务器上配置sersync服务;
  6. 在另一台服务器开启rsync守护进程服务,以同步拉取来自sersync服务器上的数据;
    通过rsync的守护进程服务后可以发现,实际上sersync就是监控本地的数据写入或更新事件;然后,在调用rsync客户端的命令,将写入或更新事件对应的文件通过rsync推送到目标服务器

三、操作
一台装sersync一台装rsync服务 对10.0.0.5网站根目录的/var/www/html目录备份到10.0.0.6的/www (所以10.0.0.6上只安装rsync就可以了。
Sersync服务器(源机器 ;数据源【部署的项目,代码等】):10.0.0.5
Rsync服务器(备份机(备份端磁盘大专门用来存储数据 );目标机器):10.0.0.6

以上是关于实现数据实时同步的主要内容,如果未能解决你的问题,请参考以下文章

inotify实时同步数据

inotify和rsync实现数据实时同步

0基础linux运维教程 Rsync结合inotify实现数据实时同步

rsync+inotify实现实时同步

rsync+inotify实时同步

rsync与inotify实现数据实时同步