大文件切割,访问26wURL地址
Posted mr.杰瑞
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了大文件切割,访问26wURL地址相关的知识,希望对你有一定的参考价值。
需求是将一个192M的文件,将url地址提取出来,然后要访问一遍
1首先将文件按行进行拆分
split -l 2000 data_20210728_071202.txt
2将切分好的文件命名,也可以用shell脚本写一个命名
#!/bin/bash
function read_dir()
i=1
for file in `ls $1` #注意此处这是两个反引号,表示运行系统命令
do
if [ -d $1"/"
以上是关于大文件切割,访问26wURL地址的主要内容,如果未能解决你的问题,请参考以下文章