xargs

Posted 2020-10-12 qiuri2008

变量置换，主要用于不支持管道的shell命令，如：rm、sed等。
比如：
删除文件－　ls|xargs -i rm -rf {}
文件改名－   ls|xargs -i mv {} {}.old

将命令逐个替换到{}

执行命令:xargs

当find产生一个文件列表时,该列表提供给另一个命令有时是很有用的.

$find -name ‘*.c‘| rm

rm: 缺少操作数

请尝试执行"rm --help"来获取更多信息。

$find -name ‘*.c‘| xargs rm

无任何显示,说明已成功删除.

 

1.简介,之所以能用到这个命令,关键是由于很多命令不支持管道(|)来传递参数,而日常工作中有这个必要,所以就有了xargs 命令,如上例.

xargs可以读入stdin的资料,并且以空白子元或断行子元作为分辨,将stdin的资料分隔成为atguments,因为是以空白子元作为分隔,所以,如果有一些文件名或者其他有意义的名词内含空白子元的时候,xargs就可能会出现误判了.

$touch ‘file 1.log‘ ‘file 2.log’

$ll

总用量 0

-rw-r--r-- 1 root root 0 7月  13 10:18 file 1.log

-rw-r--r-- 1 root root 0 7月  13 10:18 file 2.log

$find -name ‘*.log‘

./file 2.log

./file 1.log

$find -name ‘*.log‘ | xargs rm

rm: 无法删除"./file": 没有那个文件或目录

rm: 无法删除"2.log": 没有那个文件或目录

rm: 无法删除"./file": 没有那个文件或目录

rm: 无法删除"1.log": 没有那个文件或目录

原因很简单,xargs默认是以空白字符(空格,tab,换行符)来分割记录的,因此文件名 ./file 1.log被解释成了两个记录./file和1.log,不幸的是rm找不到这两个文件.

为了解决此类问题,聪明的人类想出了一个办法,让find在打印出一个文件名之后接着输出一个null字符(‘ ’)而不是换行符,然后再告诉xargs也用null字符来作为记录的分隔符,这就是find的-print和xargs的-0选项.

$find -name ‘*.log‘ -print0 | xargs -0 rm

2.主要选项

选项	含义
-0	当stdin含有特殊子元的时候,将其当成一般字符
-a file	从文件中读入作为stdin
-e flag	注意有的时候可能会是-E,flag必须是一个以空格分割的标志,当xargs分析到含有flag这个标志的时候就停止
-p	当每次执行一个argument的时候咨询问一次用户.
-n num	后面加次数,表示命令在执行的时候一次用arguments的个数,默认是用所有的.
-t	便是先打印命令,然后在执行
-i	或者是-I,将xargs的每项名称,一般是一行一行的赋值给{},可以用{}代替
-r no-run-if-enpty	当xargs的输入为空的时候则停止xargs,不用再去执行了
-s num	命令行的最大字符数
-d delim	分隔符,默认的xargs分隔符是回车,argument的分隔符是空格,这里修改的是xargs的分隔符
-x	exit的意思,主要是匹配-s使用
-P	修改最大的进程数,默认是1,为0的时候as mang as it can

 

 

find -print和-print0的区别:

-print每一个输出后会添加一个回车换行符,而-print0则不会.

 

xargs是给命令传递参数的一个过滤器，也是组合多个命令的一个工具。它把一个数据流分割为一些足够小的块，以方便过滤器和命令进行处理。通常情况下，xargs从管道或者stdin中读取数据，但是它也能够从文件的输出中读取数据。xargs的默认命令是echo，这意味着通过管道传递给xargs的输入将会包含换行和空白，不过通过xargs的处理，换行和空白将被空格取代。

xargs 是一个强有力的命令，它能够捕获一个命令的输出，然后传递给另外一个命令，下面是一些如何有效使用xargs 的实用例子。
1. 当你尝试用rm 删除太多的文件，你可能得到一个错误信息：/bin/rm Argument list too long. 用xargs 去避免这个问题

1	find ~ -name ‘*.log‘ -print0 | xargs -0 rm -f

2. 获得/etc/ 下所有*.conf 结尾的文件列表，有几种不同的方法能得到相同的结果，下面的例子仅仅是示范怎么实用xargs ，在这个例子中实用 xargs将find 命令的输出传递给ls -l

1	# find /etc -name "*.conf" | xargs ls –l

3. 假如你有一个文件包含了很多你希望下载的URL, 你能够使用xargs 下载所有链接

1	# cat url-list.txt | xargs wget –c

4. 查找所有的jpg 文件，并且压缩它

1	# find / -name *.jpg -type f -print | xargs tar -cvzf images.tar.gz

5. 拷贝所有的图片文件到一个外部的硬盘驱动

1	# ls *.jpg | xargs -n1 -i cp {} /external-hard-drive/directory

xargs 命令
用途
构造参数列表并运行命令。
语法
xargs [  -p ] [  -t ] [  -e [ EOFString ] ] [  -E EOFString ] [  -i [ 
ReplaceString ] ] [  -I ReplaceString ] [  -l [ Number ] ] [  -L Number ] [  -n 
Number  [  -x ] ] [  -s Size ] [ Command [ Argument ... ] ]
  注： 不要在小写的标志和参数之间放置空格。
描述
生成的命令行长度是 Command 和每个作为字符串对待的 Argument，包括用于每个字符串的空字节结束符号，大小（以字节计算）的总和。xargs 
命令限制命令行的长度。当构造的命令行运行时，组合的 Argument 和环境列表不能超过 ARG_MAX 字节。在这一约束里，如果不指定 -n 或 -s 
标志，缺省命令行长度至少是 LINE_MAX 指定的值。
标志
      -e[EOFString]废弃的标志。请使用 -E 标志。 
      将 EOFString 参数用作逻辑 EOF 字符串。如果不指定 -e 或 -E 标志，则采用下划线（_）为逻辑 EOF 字符串。如果不指定 
      EOFString 参数，逻辑 EOF 字符串能力被禁用且下划线被照字面含义使用。xargs 命令读取标准输入直到达到 EOF 或指定的字符串。
      -E EOFString指定逻辑 EOF 字符串以替换缺省的下划线（_）。 xargs 命令读取标准输入直到达到 EOF 或指定的字符串。
      -i[ReplaceString]废弃的标志。请使用 -I（大写 i）标志。 
      如果没有指定 ReplaceString 参数，使用字符串 "{}"。
        注：-I（大写 i）和 -i 标志是互相排斥的；最后指定的标志生效。
      -I ReplaceString（大写 i）。插入标准输入的每一行用 Command 参数的自变量，把它插入出现的每个 ReplaceString 
      的 Argument 中。ReplaceStrings 不能在超过 5 个自变量中使用。在每个标准输入行开始的空字符被忽略。每个 Argument 
      能包含一个或多个 ReplaceStrings，但不能大于 255 字节。-I 标志同样打开 -x 标志。 
        注：-I（大写 i）和 -i 标志是互相排斥的；最后指定的标志生效。
      -l[Number]（小写的 L）。废弃的标志。请使用 -L 标志。 
      如果没有指定 Number 参数，使用缺省值 1。-l 标志同样打开 -x 标志。
        注： -L、-I（小写的 L）和 -n 标志是互相排斥的；最后指定的标志生效。
      -L Number用从标准输入读取的非空参数行的指定的数量运行 Command 命令。如果保留少于指定的 Number，Command 
      参数的最后调用可以有少数几个参数行。一行以第一个换行字符结束，除非行的最后一个字符是一个空格或制表符。后续的空格表示延续至下一个非空行。 
        注： -L、-I（小写的 L）和 -n 标志是互相排斥的；最后指定的标志生效。
      -n Number运行 Command 参数，且使用尽可能多的标准输入自变量，直到 Number 参数指定的最大值。xargs 
      命令使用很少的自变量，如果： 
        如果被积累的命令行长度超过了由 -s Size 标志指定的字节。 
        最后的迭代有少于 Number（但是非零）的自变量保留。 
          注： -L、-I（小写的 L）和 -n 标志是互相排斥的；最后指定的标志生效。
      -p询问是否运行 Command 参数。它显示构造的命令行，后跟一个 ?...（问号和省略号）提示。输入肯定的、特定于语言环境的响应以运行 
      Command 参数。任何其它响应都会引起 xargs 命令跳过那个特定的参数调用。每个调用都将询问您。 -p 标志同样打开 -t 标志。
      -s Size设置构造的 Command 行的最大总大小。Size 参数必须是正整数。如果满足以下条件，则使用很少的自变量： 
        自变量的总数超出 -n 标志指定的自变量数。 
        总行数超出 -L 或 -I（小写 L）标志指定的行数。 
        累加至在 Size 参数指定的字节数之前达到 EOF。

      -t启用跟踪方式并在运行之前将构造的 Command 行回送到标准错误。
      -x如果有任何 Command 行大于 -s Size 标志指定的字节数，停止运行 xargs 命令。如果指定 -I（大写 i）或 -l（小写 
      L）标志，则打开 -x 标志。如果没有指定 -i、-I（大写 i）、-l（小写 L）、-L 或 -n 标志，则 Command 行的总长度必须在 
      -s Size 标志指定的限制内。

出口状态
该命令返回下列出口值：
      0所有 Command 参数的调用都返回出口状态 0。
      1-125不能组装满足指定要求的命令行，一个或多个 Command 参数的调用返回一个非零出口状态，或发生一些其它的错误。
      126Command 已找到但不能被调用。
      127找不到 Command。

如果不能组装满足指定要求的命令行，则不能调用这个命令，命令的调用被一个信号终止，或一个命令调用以出口状态 255 退出。xargs 
命令将写一条诊断消息并退出而不处理任何保留的输入。
示例
  要对名称在一个文件中列出的文件使用命令，输入： 
xargs lint -a <cfiles如果 cfiles 文件包含下面的文本：
main.c readit.c
gettoken.c
putobj.cxargs 命令就构造并运行下面的命令：
lint -a main.c readit.c gettoken.c putobj.c如果 cfiles 文件包含比列出在单一外壳程序命令行上的文件名更多的文件名（最多 LINE_MAX），xargs 命令会用列出的文件名运行 lint 
  命令。然后它使用余下的文件名构造并运行另一个 lint 命令。根据在 cfiles 文件中列出的文件名，命令看起来可能类似于如下所示的内容：
lint -a main.c readit.c gettoken.c . . .
lint -a getisx.c getprp.c getpid.c . . .
lint -a fltadd.c fltmult.c fltdiv.c . . .这一命令序列同用所有的文件名运行 lint 命令一次不完全一样。lint 命令检查文件之间的交叉引用。然而，在这个示例中，它不能在 main.c 和 
  fltadd.c 文件之间，或任意两个在分开的命令行上列出的两个文件之间进行检查。
  由于这个原因，仅当所有的文件名都在一行上列出时，才可能运行命令。要将这个指定到 xargs命令，通过输入以下命令使用 -x 标志：

  xargs  -x lint -a <cfiles
  如果在文件 cfiles 中的所有文件名没有在一个命令行上列出，xargs 命令显示一条错误消息。 
  要构造包含一定数量文件名的命令，输入： 
  xargs  -t  -n 2 diff <<EOF
  starting chap1 concepts chap2 writing
  chap3
  EOF
  这一命令序列构造并运行每个包含两个文件名的 diff 命令（-n 2）： 
diff starting chap1
diff concepts chap2
diff writing chap3-t 标志使 xargs 命令在运行每个命令之前显示该命令，所以能看到正在发生的事件。<<EOF 和 EOF 模式匹配字符定义一个 here 
  document，它把在结尾行之前输入的文本用作对 xargs 命令的标准输入。
  要把文件名插入命令行的中间，输入： 
  ls | xargs  -t  -I {} mv {} {}.old
  这一命令序列通过在每个名字结尾添加 .old 来重命名在当前目录里的所有文件。-I 标志告诉 xargs 命令插入有｛｝（花括号）出现的 ls 
  目录列表的每一行。如果当前目录包含文件 chap1、chap2 和 chap3，这会构造下面的命令： 
mv chap1 chap1.old
mv chap2 chap2.old
mv chap3 chap3.old要对独立选择的文件运行命令，输入： 
  ls | xargs  -p  -n 1 ar r lib.a
  这一命令序列允许选择文件以添加到 lib.a 库。-p 标志告诉 xargs 命令去显示每一个它构造的 ar命令并询问是否想运行它。输入 y 
  来运行命令。如果不想运行这个命令按任意其它键。 
  会显示一些类似于下面的内容：
ar r lib.a chap1 ?...
ar r lib.a chap2 ?...
ar r lib.a chap3 ?... 要构造包含特定数量自变量的命令并将那些自变量插入一个命令行的中间，输入： 
ls | xargs -n6 | xargs -I{} echo {} - some files in the directory如果当前目录包含从 chap1 到 chap10 的文件，构造的输出将会是下列内容：
chap1 chap2 chap3 chap4 chap5 chap6 - some files in the directory
chap7 chap8 chap9 chap10 - some file in the directory文件
      /usr/bin/xargs包含 xargs 命令。