大文件切割,访问26wURL地址

Posted mr.杰瑞

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了大文件切割,访问26wURL地址相关的知识,希望对你有一定的参考价值。

需求是将一个192M的文件,将url地址提取出来,然后要访问一遍
1首先将文件按行进行拆分

split -l 2000 data_20210728_071202.txt

2将切分好的文件命名,也可以用shell脚本写一个命名

 #!/bin/bash
 function read_dir()
   
i=1
for file in `ls $1` #注意此处这是两个反引号,表示运行系统命令
 do
  if [ -d $1"/"

以上是关于大文件切割,访问26wURL地址的主要内容,如果未能解决你的问题,请参考以下文章

大文件切割,访问26wURL地址

Nginx日志切割

nginxi日志切割

NGINX按天切割日志

Apache日志切割

nginx访问日志Nginx日志切割 静态文件不记录日志和过期时间