4-10 Linux 中的文件同步传输 --- rsync
Posted
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了4-10 Linux 中的文件同步传输 --- rsync相关的知识,希望对你有一定的参考价值。
参考技术A rsync 命令用于文件同步传输,它可以实现本地计算机与远程计算机之间,或者两个本地目录之间同步传输文件(但不支持两台远程计算机之间的同步)。它也可以当作文件复制工具,替代 cp 命令。当复制大文件的时候,cp 命令不会显示进度和速度不太方便,可以用 rsync 命令来替代。rsync 的最大特点就是它可以增量备份,也就是默认只传输有变动的文件。一、rsync 安装(Red Hat系):yum -y install rsync。
二、传输大文件的时候,cp命令不会显示进度和速度不太方便,可以用rsync命令来替代。
Linux探索之旅第四部分第三课:文件传输,潇洒同步
内容简单介绍
1、第四部分第三课:文件传输。潇洒同步
2、第四部分第四课:分析网络。隔离防火
文件传输。潇洒同步
这一课的内容相对简单,所以我们慢慢享用。
经过上一课的学习。我们已经知道怎样远程连接到其它电脑了。
从今以后。你就能够在自己的电脑上执行命令,来控制远方的还有一台电脑了,非常酷吧。
我们继续探究Linux的奇幻网络世界。
这个网络世界比較特别,或许你已经有所体会:前辈们做了大量努力,靠加密方法来保证网络间传输的数据的安全。以防我们私人的信息泄露。比如password。
这一课我们来学习文件传输。主要分为下面几方面:
-
怎样下载文件
-
怎样连接到FTP,读取,下载文件
-
怎样安全地复制文件
当中涉及的关于网络方面的知识,能够查阅小编已完结的系列教程《Web探索之旅》:http://blog.csdn.net/column/details/webexplore.html?
wget:下载文件
我们就从一个简单的命令開始吧。就是:wget
它能够使我们直接从终端控制台下载文件,仅仅须要给出文件的HTTP或FTP地址。
命令格式:
wget [參数] [URL地址]
比如:
wget http://cdimage.debian.org/debian-cd/8.2.0/i386/iso-cd/debian-8.2.0-i386-netinst.iso
就会開始从http://cdimage.debian.org/debian-cd/8.2.0/i386/iso-cd/上下载debian-8.2.0-i386-netinst.iso这个文件。
假设要停止下载,仅仅须要按Ctrl +C
能够看到下方会出现一个进度条,显示下载进度:
38%表示已下载百分之38。
117k/s是下载速度。表示117kb每秒。
eta是估计剩余时间,此处是70秒。
那么。怎么事先获得供wget下载的地址呢?
你能够用浏览器(比方firefox),找到要下载的文件。然后在文件上点击鼠标右键。左键点击"复制链接地址",例如以下图:
然后黏贴到wget命令的地址參数中就能够了。
wget 非常稳定,它在带宽非常窄的情况下和不稳定网络中有非常强的适应性。假设是因为网络的原因下载失败。wget会不断的尝试,直到整个文件完成下载。假设是server打断下载过程,它会再次联到server上从停止的地方继续下载。这对从那些限定了链接时间的server上下载大文件非常实用。简直是bug般的存在。
继续中断的下载
要继续一个中断的下载,仅仅要在同样的下载命令中增加 -c 參数。比如:
wget -c http://cdimage.debian.org/debian-cd/8.2.0/i386/iso-cd/debian-8.2.0-i386-netinst.iso
c是英语continue的缩写。表示“继续”。
wget有许多的參数选项,我们不能逐一列举。能够參看wget的使用手冊:man wget
wget的一个不错的地方是它显示下载的进度。稍后我们会学习的ftp命令则不会显示下载进度。
scp:网间拷贝
我们曾经的课程中学习过cp命令,它用于在自己的电脑上复制文件。
scp是Secure CoPy的缩写,表示“安全拷贝”。这个命令能够使我们通过网络,把文件从一台电脑复制到还有一台。当然,拷贝的信息是安全的,正如它的名字所看到的。
也有一个命令rcp,是Remote CoPy的缩写。也能够做相同的事。可是信息没有得到安全保护,不推荐。
scp使用起来有点类似上一课学过的SSH(Secure SHell)。
这并非巧合,由于scp是基于SSH的原理来运作的。SSH首先会在两台通过网络连接的电脑之间创建一条安全通信的管道(如上一课所看到的),scp就利用这条管道安全地复制文件。
scp的基本命令格式例如以下:
scp original_file destination_file
当中original_file表示源文件。就是被拷贝的文件。
destination_file表示目标文件,就是拷贝产生的文件。
这两个文件都能够例如以下方式来表示:
[email protected]:file_name
当中user是登录名。ip是域名(比如google.fr)或ip地址(比如89.231.45.67),file_name是文件路径。不要忘了中间的@号和冒号(:)。
从自己电脑复制文件到还有一台电脑
这非常easy,比如:
scp image.png [email protected]:/home/oscar/images/
表示把我的电脑中当前文件夹下的image.png文件复制到远程电脑(ip地址是89.231.45.67)的用户oscar的/home/oscar/images文件夹下,文件名称不变(还是image.png,你也能够改名字)。
例如以下图所看到的:
当然了。scp会请求你输入远程电脑(ip地址是89.231.45.67)的用户oscar的password。输入password,回车。就開始拷贝了。
从还有一台电脑复制文件到自己电脑
类似的使用方法,比如:
scp [email protected]:/home/oscar/images/image.png file_changed_name.png
表示从远程电脑(ip地址是89.231.45.67)的用户oscar的/home/oscar/images文件夹下把image.png复制到我的电脑中当前文件夹下,并改名为file_changed_name.png(不改名也能够)。
例如以下图所看到的:
改动port
上述命令中,我们并没有指定用哪个port,仅仅指定了ip地址。默认的port号是22,和SSH一样。我们也能够改动port号。用-P參数。比如:
scp -P 7821 [email protected]:/home/oscar/images/image.png .
表示从远程电脑(ip地址是89.231.45.67,port7821)的用户oscar的/home/oscar/images文件夹下把image.png复制到我的电脑中当前文件夹下,名字不变。此处用点号(.)表示当前文件夹。
注意:上一课中。SSH改动port号使用-p參数,p是小写。而scp改动port号使用-P參数,P是大写。
ftp&sftp:传输文件
FTP是File Transfer Protocol的缩写。表示《文件传输协议》。顾名思义。就是用于传输文件的。
FTP协议已经有点岁数了,1985年诞生。比小编来老呢。如今仍然是传输文件的最经常使用协议。
正所谓“廉颇老矣,尚能饭否”,人家是“FTP当道,宝刀未老”。
使用ftp主要分为两种情况:
-
从公共的FTPserver下载文件。一般来说,当你点击浏览器上的下载链接时,浏览器就以自己主动和透明的方式来完毕这个操作。
这样的情况下。连接是匿名的。
-
从私有的FTPserver上传或下载文件。当我们从server出租商处租用一台server作为个人站点之用时,出租商一般会给我们一个FTP的登录名和password,我们能够连接,以上传及下载文件。
这样的情况下,连接是须要身份验证的。
由于并非每一个读者都有自己私人的FTPserver,所以以下演示的时候。我们会连接到公共的FTPserver。当然,假设你想要连接到私人FTPserver,那方法是一样的。
我们这里使用纯命令行的形式来操作,当然了,也存在不少优秀的FTP软件,能够提供图形操作界面,比如著名的FileZilla。
连接到FTPserver
我们试着连接到Debian的FTPserver。地址例如以下:ftp://ftp.debian.org
方法非常easy:
ftp ftp.debian.org
Debian的FTPserver应该会有所回应,并向你请求输入username和password。对于公共的FTPserver,username一般都填写 anonymous (表示“匿名”)。
password你随便输入什么都会被接受。
登录成功后。会看到类似下面信息:
230 Login successful.
Remote system type is UNIX.
Using binary mode to transfer files.
ftp>
如今你有了命令提示符了,就是那个 ftp>
你就能够输入FTP命令了。
在FTPserver中操作
好消息:你在FTPserver上能够使用的命令基本和我们到眼下为止学习的Linux命令是一样的。
比如:
ls:列出当前文件夹的文件
pwd:显示当前文件夹的路径
cd:转换文件夹
你能够试试其它命令。
文件传输
假设你想要上传及下载文件。有两个命令要知道:
-
put:用于上传文件
-
get:用于下载文件
例如以下图所看到的:
我们来下载一个文件试试(README):
ftp> get README
local: README remote: README
200 PORT command successful. Consider using PASV.
150 Opening BINARY mode data connection for README (940 bytes).
226 File send OK.
940 bytes received in 0.00 secs (918.9 kB/s)
完成下载。README文件如今位于你的当前文件夹了。
假设你连接到FTPserver,但又想要在自己的电脑上执行命令。怎么办呢?
仅仅要在命令前加一个感叹号就能够了,比如:
!pwd
就会在自己电脑上运行pwd命令,而不是在FTPserver上运行。
其它的ftp命令
还有好些其它的FTP命令。我们就不逐一列举了。
用man ftp来看看其它可用的命令吧。你会发现,并非全部的命令都与你到眼下学过的Linux命令一样的。
比如。删除文件不是用rm命令,而是delete命令。
要从FTPserver断开连接。你能够用Ctrl+D组合键。也能够用bye,exit或quit命令,效果是一样的。
sftp:安全加密的ftp
ftp命令尽管方便,可是有一个致命缺点:不安全。数据不是加密传输的。不论什么人,仅仅要连接到同一个网络。能够想办法截取到你传输的数据,或者你的password。
因此,我们须要请出sftp。sftp是Secure FTP的缩写。
表示“安全的FTP”。
sftp也是基于SSH的。所以登录须要username和password。使用方法例如以下:
sftp [email protected]
比如:
sftp [email protected]
一旦你输入username和password,连接上之后。其它的操作和ftp是一样的。仅仅只是通信被加密了,更安全。
用man sftp来看看其它可用的命令和參数吧。
上述命令中。我们并没有指定用哪个port。仅仅指定了ip地址。默认的port号是22,和SSH一样。我们也能够改动port号。用-oPort參数。比如:
sftp -oPort 3592 [email protected]
rsync:同步备份
rsync命令易于使用,功能非常强大。
rsync是一个小程序。须要安装,默认系统一般没有这个命令。
sudo apt-get install rsync
rsync命令使我们能够同步两个文件夹。无论这两个文件夹位于同一台电脑还是不同的电脑(用网络连接)。
rsync应该是最经常使用于“增量备份”的命令了吧。什么是“增量备份”呢?
增量备份(incremental backup)是备份的一个类型,指在一次全备份或上一次增量备份后。以后每次的备份仅仅需备份与前一次相比添加或者被改动的文件。
备份有什么优点呢?
想象一下,假如你不备份文件。那么一旦你的个人电脑遭遇不測,比如坏了,被偷,等等。那么你的数据就找不回来了。假设有写了几十页的论文在里面,那哭倒长城都有可能啊。好些朋友就有过这样慘痛的经历。
小编曾经就有备份的良好习惯。并且我备份不止会在一个地方。
所以备份非常重要。假如你把你电脑上的文件备份到远程server上,那么例如以下图所看到的:
用rsync来进行备份。是很方便的。
假如。你把自己的用户家文件夹都备份到server上了,或许有十几个G的内容啊。
第一次备份时,须要传输这整整十几个G的内容,可是以后呢,仅仅须要传输新增或改动的内容就够了,不须要再传一遍。这就是rsync的强大之处,所谓“增量备份”的优点。
如上图所看到的,我用rsync仅仅传输了新的那个文件。其它的并没有再传输。
rsync就好像更智能的scp。
备份到同一台电脑的其它文件夹
rsync -arv Images/ backups/
以上命令,将Images文件夹下的全部文件备份到backups文件夹下。
-arv參数分别表示:
-
-a:保留文件的全部信息。包含权限,改动日期,等等。
-
-r:递归调用。
表示子文件夹的全部文件也都包含。
-
-v:冗余模式。
输出具体操作信息。
删除文件
默认地,rsync在同步时并不会删除目标文件夹的文件。
比如,你的源文件夹(被同步文件夹)中删除了一个文件。可是用rsync同步时。它并不会删除同步文件夹中的同样文件。
假设要使rsync也同步删除操作。
那么能够这么做:
rsync -arv --delete Images/ backups/
加上 --delete 參数就能够了。
备份到还有一台电脑的文件夹
rsync -arv --delete Images/ [email protected]:backups/
是不是非常easy呢。
至于很多其它參数,能够用man rsync学习。
当然,rsync的强大之处绝不止于此。
你能够自己配置rsync。使得它从指定文件夹(能够是多个文件夹)备份到指定的ip地址的文件夹下,并且能够指定哪些类型文件是要备份的,哪些类型不要备份。然后把这一长串命令统一用Shell来写成一个文件(比如取名叫backup),使之可运行(用chmod命令),再把这个文件的路径加入到PATH中。
这样你以后不论在哪个文件夹下输入backup。rsync就帮你自己主动同步了,很帅气。这酸爽,不言而喻~
至于怎么做,就算是留给大家的课后兴趣作业咯。能够自己百度,比如“Ubuntu下rsync配置”。
总结
-
wget命令能够下载文件。
-
为了将文件从一台电脑复制到还有一台电脑。我们能够使用scp命令。它使用上一课提到的SSH,因此传输是加密的,是安全的。
-
我们能够用ftp命令来连接到一个FTPserver,然后就能够上传及下载文件了。
-
sftp和ftp命令类似,可是它用了SSH。所以传输的信息是加密的。
-
rsync命令能够同步同一台电脑或两台不同电脑上的两个文件(夹)的内容,用rsync命令来备份文件特别方便。
第四部分第四课预告
今天的课就到这里。一起加油吧!
下一课我们学习:分析网络。隔离防火
以上是关于4-10 Linux 中的文件同步传输 --- rsync的主要内容,如果未能解决你的问题,请参考以下文章