Rsync服务器的安装与配置详解

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Rsync服务器的安装与配置详解相关的知识,希望对你有一定的参考价值。

Rsync简介

1.1什么是Rsync

Rsync是一款快速的,开源的,多功能的,可以实现全量和增量的远程和本地的数据同步和数据备份的工具。

全量的概念是:全部备份。

增量的概念是:差异化备份。对上一次基础上,对更新的部分作备份。

1.1.2    Rsync简介

   Rsync具有可以使本地和远程的两台主机之间的数据快速同步镜像远程备份的功能,这个功能类似ssh带scp的命令,但是有优于scp的功能,scp每次都是全量拷贝,而rsync是增量拷贝。

   Rsync还可以在本地主机的不同文件或者目录之间全量和增量的复制,类似于cp命令,cp命令是全量拷贝,而rsync是增量拷贝。

   Rsync还可以实现删除文件和目录的功能,相当于rm命令

   一个rsync相当于scp,cp,rm命令,并且还忧于他们每个命令,因为rsync具有增量备份的功能。


1.1.3  rsync的特性:

  1)支持拷贝特殊文件如链接文件,设备等

  2)可以有排除指定文件或者目录同步的功能,相当于打包命令tar的排除功能。

  3)可以做到保持原文件或者目录的权限,时间,软硬链接,属组,主等所有属性均不改变

  4)可以实现增量备份,既只同步发生变化的数据

  5)可以勇士rcp,rsh,ssh等方式来配合传输文件

  6)可以通过socket传输文件和数据

  7)支持匿名的认证模式传输

1.1.4  rsync三种工作方式

1)本地模式,相当于cp和rm命令

[[email protected] tmp]# rsync /etc/passwd /tmp/    ##相当于cp的命令
[[email protected] tmp]# ls
passwd
 
[[email protected] mnt]# rsync -avz --delete passwd  /mnt/  ##--delete相当于删除的功能
[[email protected] mnt]# ls
passwd

--delete的作用是删除的功能,本地有什么,远端就有什么。比如本地有passwd的内容,不管/mnt目录下面有什么,都只有passwd的内容,所有谨慎用--delete

2)通道模式,一般配合ssh key免秘钥使用,结合定时任务

[[email protected] mnt]# rsync -avz -e  ‘ssh -p 22‘ /etc/passwd [email protected]:/tmp/  
[email protected]‘s password: 
sending incremental file list
passwd
[[email protected] tmp]# ls ##在远端查看
passwd

3)daemon模式

 

1.1.5 rsync的参数说明

-v :详细输出

-z :传输时进行压缩以提高传输效率。

-a :归档模式,表示以递归的方式传输文件,并保持文件的属性

--exclude :排除不需要同步传输的文件或者目录

--delete: 让目标目录和源目录的数据一致

--bwlimit: 限制带宽,默认单位是:kb(案例:某DBA做数据同步,导致用户无法访问网站)


Rsync服务器的安装

2.1安装准备

2.1.1查看rsync的版本号

[[email protected] ~]# rsync --version
rsync  version 3.0.6  protocol version 30
Copyright (C) 1996-2009 by Andrew Tridgell, Wayne Davison, and others.
Web site: http://rsync.samba.org/
Capabilities:
    64-bit files, 64-bit inums, 64-bit timestamps, 64-bit long ints,
    socketpairs, hardlinks, symlinks, IPv6, batchfiles, inplace,
    append, ACLs, xattrs, iconv, symtimes
rsync comes with ABSOLUTELY NO WARRANTY.  This is free software, and you
are welcome to redistribute it under certain conditions.  See the GNU
General Public Licence for details.

2.1.2 查看服务器的内核,版本信息

[[email protected] ~]# cat /etc/redhat-release 
CentOS release 6.7 (Final)
[[email protected] ~]# uname -r
2.6.32-573.el6.x86_64
[[email protected] ~]# uname -m
x86_64


2.2主要讲一下通过daemon实现数据同步案例

/etc/rsyncd.conf是rsync的默认配置文件,该配置文件不存在,需要编辑内容


[[email protected] ~]# cat /etc/rsyncd.conf 
#rsync_config_____________________________start
#created by oldboy 15:01 2007-6-5
##rsyncd.conf start##
uid = rsync   ##进程对应的用户,是虚拟用户。远端的命令使用rsync访问共享目录
gid = rsync   ##进程对应的用户组。
use chroot = no    ##安全相关
max connections = 200      ##最大连接数
timeout = 300    ##超时时间
pid file = /var/run/rsyncd.pid      ##进程对应的进程号文件
lock file = /var/run/rsyncd.lock     ##锁文件
log file = /var/log/rsyncd.log        ##日志文件
[backup]     ###模块名称
path = /backup      ###服务器提供访问的目录
ignore errors       ##忽略错误
read only = false    ##可写
list = false      ##不能列表
hosts allow = 172.16.1.0/24  ##允许的ip地址
##hosts deny = 0.0.0.0/32
auth users = rsync_backup     ##虚拟用户
secrets file = /etc/rsync.password    ###虚拟密码
#rsync_config________________________end

其中rsync用户默认是不存在的,需要创建用户

[[email protected] ~]# useradd rsync -s /sbin/nologin -M
[[email protected] ~]# cat  /etc/passwd|grep rsync
rsync:x:501:501::/home/rsync:/sbin/nologin
[[email protected] ~]# id rsync
uid=501(rsync) gid=501(rsync) 组=501(rsync)

为什么用虚拟用户?
应答:文件和进程都要满足属主的要求,文件和进程的存在一定是需要用户的,也是为了安全问题。

创建/backup目录,并且属主和属组都属于rsync

[[email protected] ~]# mkdir /backup/ -p
[[email protected] ~]# chown -R rsync.rsync /backup/
[[email protected] ~]# ls -ld /backup/
drwxr-xr-x 2 rsync rsync 4096 12月  9 2016 /backup/


创建配置文件/etc/rsync.password,默认不存在这个配置文件

[[email protected] ~]# cat /etc/rsync.password 
rsync_backup:oldboy
[[email protected] ~]#chmod 600 /etc/rsync.password
[[email protected] ~]# ls -l /etc/rsync.password 
-rw-------. 1 root root 20 11月 29 01:14 /etc/rsync.password


启动服务:
[[email protected] ~]# rsync --daemon 
[[email protected] ~]#ps -ef|grep rsync|grep -v grep ##查看进程有没有启动
root       3046      1  0 15:19 ?        00:00:00


加入开机自启动

[[email protected] ~]# tail -1 /etc/rc.local 
/usr/bin/rsync --daemon


Rsync客户端的安装


编辑配置文件/etc/rsync.passwd,该配置文件默认不存在

vim  /etc/rsync.passwd
[[email protected] backup]# cat /etc/rsync.password 
oldboy
chmod 600 /etc/rsync.passwd


创建backup目录

mkdir -p /backup
cd /backup
touch stu{01,100}


客户端推送:

方法1:
[[email protected] backup]# rsync -avz /backup/ [email protected]::backup/ --password-file=/etc/rsync.password 
方法2:
[[email protected] backup]# rsync -avz /backup/ rsync://[email protected]/backup/ --password-file=/etc/rsync.password



 从客户端把服务端的东西拉回来的方案

服务端:

[[email protected] backup]# touch 1 234
[[email protected] backup]# ls
1  234


 

客户端:

[[email protected] ming]# rsync -avz   [email protected]::backup/ /ming/  --password-file=/etc/rsync.password 
receiving incremental file list
./
1
234
 
sent 105 bytes  received 204 bytes  618.00 bytes/sec
total size is 0  speedup is 0.00
[[email protected] ming]# ls
1  234



Rsync多模块实战

1.1.1 多模块实战

实例1

环境:

[[email protected] ~]# cat /etc/rsyncd.conf
#rsync_config_____________________________start
#created by oldboy 15:01 2007-6-5
##rsyncd.conf start##
uid = rsync  
gid = rsync   
use chroot = no    
max connections = 200      
timeout = 300    
pid file = /var/run/rsyncd.pid     
lock file = /var/run/rsyncd.lock     
log file = /var/log/rsyncd.log
ignore errors
read only = false
list = false
hosts allow = 172.16.1.0/24
hosts deny = 0.0.0.0/32
auth users = rsync_backup
secrets file = /etc/rsync.password       
[backup]     
path = /backup      
[chen]
path = /chen
#rsync_config________________________end
服务器端:
[[email protected] ~]# mkdir /chen
[[email protected] ~]# ls -ld /chen/
drwxr-xr-x 2 rsync rsync 4096 12月  2 18:58 /chen/
客户端
[[email protected] ~]# ls -ld /ming
drwxr-xr-x 2 root root 4096 12月  2 18:26 /ming
[[email protected] ~]# rsync -avz /ming/ [email protected]::chen/ --password-file=/etc/rsync.password 
sending incremental file list
./
ming1
ming10
ming2
ming3
ming4
ming5
ming6
ming7
ming8
ming9
 
sent 463 bytes  received 201 bytes  1328.00 bytes/sec
total size is 0  speedup is 0.00


服务端查看效果:

[[email protected] chen]# ls
ming1  ming10  ming2  ming3  ming4  ming5  ming6  ming7  ming8  ming9


实例2

环境:

[[email protected] chen]# cat /etc/rsyncd.conf
#rsync_config_____________________________start
#created by oldboy 15:01 2007-6-5
##rsyncd.conf start##
uid = rsync  
gid = rsync   
use chroot = no    
max connections = 200      
timeout = 300    
pid file = /var/run/rsyncd.pid     
lock file = /var/run/rsyncd.lock     
log file = /var/log/rsyncd.log
ignore errors
read only = false
list = false
hosts allow = 172.16.1.0/24
hosts deny = 0.0.0.0/32
auth users = rsync_backup
secrets file = /etc/rsync.password       
[backup]     
path = /backup      
[chen]
path = /chen
[luo]
path = /luo
ignore errors
read only = false
list = false
hosts allow = 172.16.1.0/24
hosts deny = 0.0.0.0/32
auth users = tang
secrets file = /etc/tang
#rsync_config________________________end
[[email protected] chen]# mkdir /luo
[[email protected] chen]# chown rsync.rsync /luo
[[email protected] chen]# ls -ld /luo/
drwxr-xr-x 2 rsync rsync 4096 12月  2 19:18 /luo/
[[email protected] chen]# cat /etc/tang 
tang:tangguo
[[email protected] luo]# ls /etc/tang  -ld
-rw------- 1 root root 13 12月  2 19:34 /etc/tang
权限一定要是600


 

客户端配置:

[[email protected] ming]# cat /etc/tang 
tangguo
[[email protected] ming]# ls /etc/tang -ld
-rw------- 1 root root 8 12月  2 19:35 /etc/tang
客户端权限也一定要是600
[[email protected] ming]# rsync -avz /ming/ [email protected]::luo/  --password-file=/etc/tang 
sending incremental file list
./
ming1
ming10
ming2
ming3
ming4
ming5
ming6
ming7
ming8
ming9
 
sent 463 bytes  received 201 bytes  1328.00 bytes/sec
total size is 0  speedup is 0.00


Rsync案例排错

5.1 案例1


[[email protected] ming]# rsync -avz /ming/ [email protected]::luo/  --password-file=/etc/tang 
@ERROR: auth failed on module luo
rsync error: error starting client-server protocol (code 5) at main.c(1503) [sender=3.0.6]
[[email protected] luo]# tail -3 /var/log/rsyncd.log 
2016/12/02 19:46:18 [3601] secrets file must not be other-accessible (see strict modes option)
2016/12/02 19:46:18 [3601] continuing without secrets file
2016/12/02 19:46:18 [3601] auth failed on module luo from unknown (172.16.1.31): missing secret for user "tang"

报错的原因是服务器端的/etc/tang的权限问题没有设置为600,我们查看一下。
[[email protected] luo]# ls -ld /etc/tang 
-rwxr-xr-x 1 root root 13 12月  2 19:34 /etc/tang
权限改为600就可以了


5.2 案例2

[[email protected] ~]# rsync -avz /ming/ [email protected]::luo/  --password-file=/etc/tang 
@ERROR: auth failed on module luo
rsync error: error starting client-server protocol (code 5) at main.c(1503) [sender=3.0.6]
查看日志
[[email protected] luo]# tail -3 /var/log/rsyncd.log 
2016/12/02 19:52:12 [3614] name lookup failed for 172.16.1.31: Name or service not known
2016/12/02 19:52:12 [3614] connect from UNKNOWN (172.16.1.31)
2016/12/02 19:52:12 [3614] auth failed on module luo from unknown (172.16.1.31): password mismatch
password mismatch,密码错误,客户端和服务器端的密码不一致导致的问题。
【注意】有的客户端和服务器端密码看起来一样,实际里面有空格,也能报错,注意一下


5.3 案例3

[[email protected] ~]# rsync -avz /backup/ rsync://[email protected]/backup/ --password-file=/etc/rsync.password 
@ERROR: chdir failed
rsync error: error starting client-server protocol (code 5) at main.c(1503) [sender=3.0.6]
原因:服务端的backup目录不存在


5.4  案例4

[[email protected] ~]# rsync -avz /backup/ rsync://[email protected]/backup/ --password-file=/etc/rsync.password 
sending incremental file list
./
rsync: failed to set times on "." (in backup): Operation not permitted (1)
1
 
sent 4325 bytes  received 1911 bytes  12472.00 bytes/sec
total size is 0  speedup is 0.00
rsync error: some files/attrs were not transferred (see previous errors) (code 23) at main.c(1039) [sender=3.0.6]
原因:服务端backup的属组和属主问题

以上是关于Rsync服务器的安装与配置详解的主要内容,如果未能解决你的问题,请参考以下文章

Rsync与Inotify监控与同步

rsync配置文件详解

rsync服务的简介和配置详解

CentOS 6.3下rsync服务器的安装与配置

CentOS 6.3下rsync服务器的安装与配置

转载CentOS 6.3下rsync服务器的安装与配置