支持断点续传的大文件传输协议

Posted 2021-01-08

文件传输协议（FTP）是一个被广泛应用的网络协议，FTP技术作为文件传输的重要手段，在数据通信领域一直发挥着举足轻重的作用，不支持断点续传，是Internet上最早也是最广泛使用的应用之一.

从1971年A.K.Bhushan提出第一个FTP协议版本（RFC114）到现在，人们对FTP的应用已经历了40余年的时间，同时，许多基于FTP协议的数据传输软件也应运而生。如Windows操作系统下经常使用的支持FTP协议的软件有：CuteFTP、FlashFXP、迅雷（Thunder）、快车（FlashGet）、网络蚂蚁（NetAnts）等；Linux操作系统中经常使用的支持FTP协议的软件有：FileZilla、gFTP、wget等，这些软件中有些是GUI图形界面的，有的只有简单的命令行界面；有些是开源免费的，有的是收费的商业软件，不管属于以上哪个类型，这些支持FTP协议的软件都有一个共同的特点：不支持断点续传。断点续传是指在文件传输或者下载的过程中，如果发生意外中断，在重新建立连接后，可以直接从未传输或未下载的部分继续传输任务，而不必重复传输已传输的内容，断点续传文件的功能需要 FTP服务器的支持。

大文件传输协议（Raysync）是针对大文件传输的网络协议，Raysync作为在广域网上进行大文件传输的重要手段，在用户数据报协议（UDP）上进行了优化，支持断点续传，是大数据远距离传输的重要协议。

然而，随着互联网的飞速发展，海量信息数据需要通过网络传输，企业经常需要向服务器传输以GB为单位的大文件，如多媒体文件网络共享等实际应用。提高大容量文件传输的效率对于多媒体文件的网络共享等应用显得越来越重要。但是，由于这些文件容量巨大，使用传统FTP传输的方式耗时长，而且在传输过程中，可能会发生意外断电或网络连接中断等不可预知的情况，导致文件重新传输的操作频繁，极大影响了数据共享的效率。再如：利用某超级计算机中心（以下简称：超算中心）的计算机进行高性能相关的计算时，客户端的用户需要通过xxx传输大容量的计算数据，如果使用传统FTP传输，效率会很低，严重影响高性能计算的效率，不能完全体现超级计算机的性能优势。由此可见，大文件传输技术对于促进网络应用的发展有着重大的意义。

大文件传输协议（Raysync），是基于UDP协议进行的开发优化，可以支持断点续传，能尽量减少了数据的重复传输量。实际应用中，有时用户传输或者下载一个大文件需要数小时，网络中断或电脑死机、重启等不可预测的意外情况发生导致传输中断时，而具有断点续传功能的Raysync服务器与客户端软件允许用户从传输或下载断线的地方继续传输，此时只需要传输之前还未传输的文件部分，减少了数据传输量，节约了时间，提高了企业的效率。