Linux笔记——使用wget镜像epel源

Posted 2020-08-24

      单位的网速自从两个月前已经大踏步迈入“古巴时代”了，慢的令人发指啊！！！，虽说装软件的时候也不多，但总有要用的时候，还是先建一个本地epel源吧。

      知道有个wget命令可以批量下载一些文件，但之前没怎么用过（专业菜鸟三十年，见谅手动斜眼），现在重新学习下怎么使用（为啥要说重新咧，本来就不会手动鄙视表情）。

      现来将镜像使用的命令写到这，以防有跟我一样的专业小白等不及看完，这再吐槽下某云的服务器，居然不让使用wget镜像整个站点，原谅本人的纯洁，阿门~！

~]# wget -b -q -np -nH --cut-dirs=1 -r -c -L --exclude-directories=repodata,repoview --accept=rpm,gz,xml http://dl.fedoraproject.org/pub/epel/6/x86_64/ -P /var/www/

    注：可以将-P指定的目录改为服务器其他目录（建议大一点留个50G，毕竟软件还是挺多哒~）。

因为查阅了下一些前辈们的使用教程，原谅在下才疏学浅，他们说的那些话大都是官方文档上翻译出来的，看不懂╮(╯▽╰)╭，下面就将上边用到的一些选项来进行灰常业余的来说明下，以防以后用到忘了（完全是提醒自己啊，让各位肥牛们贱笑了）。

    选项：

（1） -b，--background：将wget命令脱离终端而转入后台运行；

（2） -q：quiet，静默模式，不输出信息；

        （3） -r，--recursive：指定递归下载，不使用此选项则无法下载目录内容。

（4） -np，--no-parent：不追溯父目录，这一选项保证在下载过程中只下载指定目录下的内容，而不去下载根目录下所有的内容。

            注：www.centos.com这个是做测试用的

示例：

~]# wget -np -r http://www.centos.com/pub/epel/7/x86_64/ -P /tmp/test

当指定np选项时，只会将x86_64目录下的所有内容下载到/tmp/test目录中。

（5） -nH，--no-host-directories：不创建主机目录。

示例：

~]# wget -np -r -nH http://www.centos.com/pub/epel/7/x86_64/ -P /tmp/test

加入-nH选项后不会在test目录中创建以www.centos.com命名的目录，而是在test目录中创建/pub/epel/7/x86_64目录。

（6） --cut-dirs=#：忽略掉#层远程目录，此选项的意思举例比较方便。

                示例：

~]# wget --cut-dirs=1 -r http://www.centos.com/pub/epel/7/x86_64/ -P /tmp/test

当指定忽略层数为1时，在/tmp/test目录下会生成

www.centos.com

|

|—— epel

|

|—— 7

|

|——x86_64

这个类型的目录，将原来pub目录省略掉（等于原本创建在pub目录下的所有文件和目录直接创建在www.centos.com这个“根目录”下了）。

此选项的目的就是减少下载下来的内容的目录层数，原来的文件不会因为指定的层数而减少下载。

（7） -c，--continue：断点续传功能。

（8） -L，--releative：只跟踪有关系的链接。此选项对网页文件很重要，例如页面上的样式文件，就会将引用到的样式文件一并下载到本地。

（9）-X，--exclude-directories=LIST：排除指定列表中的目录。

示例：

~]# wget -r -c -L --cut-dirs=1 -np -nH -q -P /tmp/test/ --exclude-directories=*/x86_64/repodata/  http://www.centos.com/pub/epel/7/x86_64/

使用--exclude-directories选项，如果指定路径下有repodata这个目录则会将该目录中的内容忽略而不会下载。

                注意：此处指定目录必须为绝对路径，*号表示URL最后一级目录前的路径，这个在手册中倒是没有体现（也有可能是没看懂）。

（10） -A，--accept=LIST：允许下载的文件的扩展名，有多个的话使用逗号分割开。

（11） -R，--reject=LIST：与-A功能相反。

（12） -N，--timestamping：这个选项相对也很重要，在建本地epel源时可以建一个脚本来定时向远程服务器下载程序包，使用-N选项就会本地与远程进行比对，服务器没有更新就会忽略掉相同的包。

（13）-l，--level=NUMBER：指定最大递归深度（NUMBER为info 或0表示无限大，即全部下载）。

经过测试，这个选项貌似没啥作用~！

（14）-o，--output-file=FILE：将下载时输出的显示信息可以保存至指定文件中，可以作为日志查询。

注意：使用此选项则需要将-q（静默模式）关闭。

做镜像的常用选项基本就这些，其他限制速度，ftp下载以及代理使用，这里没有用到，就暂且不提。

本文出自 “积小流，成江海” 博客，请务必保留此出处http://goodjoe.blog.51cto.com/9173556/1884877