xargs命令 有大用 有大大用

xargs命令是给其他命令传递参数的一个过滤器，也是组合多个命令的一个工具。它擅长将标准输入数据转换成命令行参数，xargs能够处理管道或者stdin并将其转换成特定命令的命令参数。xargs也可以将单行或多行文本输入转换为其他格式，例如多行变单行，单行变多行。xargs的默认命令是echo，空格是默认定界符。这意味着通过管道传递给xargs的输入将会包含换行和空白，不过通过xargs的处理，换行和空白将被空格取代。xargs是构建单行命令的重要组件之一。

xargs命令用法

xargs用作替换工具，读取输入数据重新格式化后输出。

定义一个测试文件，内有多行文本数据：

cat test.txt

a b c d e f g
h i j k l m n
o p q
r s t
u v w x y z

多行输入单行输出：

cat test.txt | xargs

a b c d e f g h i j k l m n o p q r s t u v w x y z

-n选项多行输出： -n num 后面加次数，表示命令在执行的时候一次用的argument的个数，默认是用所有的。

cat test.txt | xargs -n3

a b c
d e f
g h i
j k l
m n o
p q r
s t u
v w x
y z

-d选项可以自定义一个定界符：

echo "nameXnameXnameXname" | xargs -dX

name name name name

结合-n选项使用：

echo "nameXnameXnameXname" | xargs -dX -n2

name name
name name

读取stdin，将格式化后的参数传递给命令

假设一个命令为 sk.sh 和一个保存参数的文件arg.txt：

#!/bin/bash
#sk.sh命令内容，打印出所有参数。

echo $*

arg.txt文件内容：

cat arg.txt

aaa
bbb
ccc

xargs的一个选项-I，使用-I指定一个替换字符串{}，这个字符串在xargs扩展时会被替换掉，当-I与xargs结合使用，每一个参数命令都会被执行一次：

-I 时,好像 -n1 失去作用 ,-I时好像默认使用 每行作为一个参数

cat arg.txt | xargs -I {} ./sk.sh -p {} -l

-p aaa -l
-p bbb -l
-p ccc -l

复制所有图片文件到 /data/images 目录下：

ls *.jpg | xargs -n1 -I cp {} /data/images  (这里好像应该是小-i,而不是大-I) ( 若用大I 则 ls *.jpg | xargs -n1 -I {} cp {} /data/images )

xargs结合find使用

用rm 删除太多的文件时候，可能得到一个错误信息：/bin/rm Argument list too long. 用xargs去避免这个问题：

加上 -print0 参数表示find输出的每条结果后面加上 '\0' 而不是换行

原因其实很简单, xargs 默认是以空白字符 (空格, TAB, 换行符) 来分割记录的, 因此文件名 ./file 1.log 被解释成了两个记录 ./file 和 1.log, 不幸的是 rm 找不到这两个文件.

为了解决此类问题, 聪明的人想出了一个办法, 让 find 在打印出一个文件名之后接着输出一个 NULL 字符 ('\0') 而不是换行符, 然后再告诉 xargs 也用 NULL 字符来作为记录的分隔符. 这就是 find 的 -print0 和 xargs 的 -0 的来历吧.

 问了下smile，原来xargs 默认是以空白字符来做分割的，当执行rm时候，如果查找出来的文件名中有空格，那就容易把类似于 test 1.php  当做test  和 1.php来删除。

为了解决这个问题，在打印出每一条记录后，在后面输入一个结束符，代替原来的换行符，然后再以换行符来分割每一条记录，就会保证每一条的唯一性。

 你可能要问了, 为什么要选 '\0' 而不是其他字符做分隔符呢? 这个也容易理解: 一般的编程语言中都用 '\0' 来作为字符串的结束标志, 文件的路径名中不可能包含 '\0' 字符.

find . -type f -name "*.log" -print0 | xargs -0 rm -f

xargs -0将\0作为定界符。

统计一个源代码目录中所有php文件的行数：

find . -type f -name "*.php" -print0 | xargs -0 wc -l

查找所有的jpg 文件，并且压缩它们：

find . -type f -name "*.jpg" -print | xargs tar -czvf images.tar.gz

xargs其他应用

假如你有一个文件包含了很多你希望下载的URL，你能够使用xargs下载所有链接：

cat url-list.txt | xargs wget -c

子Shell（Subshells）

运行一个shell脚本时会启动另一个命令解释器.，就好像你的命令是在命令行提示下被解释的一样，类似于批处理文件里的一系列命令。每个shell脚本有效地运行在父shell(parent shell)的一个子进程里。这个父shell是指在一个控制终端或在一个xterm窗口中给你命令指示符的进程。

cmd1 | ( cmd2; cmd3; cmd4 ) | cmd5

如果cmd2 是cd /，那么就会改变子Shell的工作目录，这种改变只是局限于子shell内部，cmd5则完全不知道工作目录发生的变化。子shell是嵌在圆括号()内部的命令序列，子Shell内部定义的变量为局部变量。

子shell可用于为一组命令设定临时的环境变量：

COMMAND1
COMMAND2
COMMAND3
(
  IFS=:
  PATH=/bin
  unset TERMINFO
  set -C
  shift 5
  COMMAND4
  COMMAND5
  exit 3 # 只是从子shell退出。
)
# 父shell不受影响，变量值没有更改。
COMMAND6
COMMAND7

来自 http://man.linuxde.net/xargs

我自己亲自做的 复制一个文件到多个目录  有大用 

# echo /home/wwwroot/{aa,cc,cc}/public_html/templets/wap/images/index/hdp/ | xargs -n1 \cp -a index_hdp0.jpg #这是ok的

# echo /home/wwwroot/{aa,cc,cc}/public_html/templets/wap/images/index/hdp/ | xargs -d ' ' -I {} \cp -a index_hdp0.jpg {} #这个不行,是不能复制到 最后一个 cc 目录下的,为什么

由下面 cp -v 可以看到复制的信息, 最好一个 cc 复制时 多了一个 \n ,,所以不能复制到cc 这个目录下

[root@ebs-25879 ~]# echo /home/wwwroot/{aa,cc,cc}/public_html/templets/wap/images/index/hdp/ | xargs -d' '  -I {}  \cp -a -v /home/wwwroot/wap_shrszg_cn/public_html/templets/wap/images/index/hdp/index_hdp0-2020-10-26.jpg {}

`/home/wwwroot/wap_shrszg_cn/public_html/templets/wap/images/index/hdp/index_hdp0-2020-10-26.jpg' -> `/home/wwwroot/aa/public_html/templets/wap/images/index/hdp/index_hdp0-2020-10-26.jpg'

`/home/wwwroot/wap_shrszg_cn/public_html/templets/wap/images/index/hdp/index_hdp0-2020-10-26.jpg' -> `/home/wwwroot/bb/public_html/templets/wap/images/index/hdp/index_hdp0-2020-10-26.jpg'

`/home/wwwroot/wap_shrszg_cn/public_html/templets/wap/images/index/hdp/index_hdp0-2020-10-26.jpg' -> `/home/wwwroot/cc/public_html/templets/wap/images/index/hdp/\n'

[root@ebs-25879 ~]#

由下面 ,为什么 使用 -d ' ' -I 时多了一行空行

[root@ebs-25879 ~]# echo /home/wwwroot/{aa,cc,cc}/public_html/templets/wap/images/index/hdp/ | xargs -n1

/home/wwwroot/aa/public_html/templets/wap/images/index/hdp/ /home/wwwroot/cc/public_html/templets/wap/images/index/hdp/ /home/wwwroot/cc/public_html/templets/wap/images/index/hdp/

[root@ebs-25879 ~]# echo /home/wwwroot/{{aa,cc,cc}/public_html/templets/wap/images/index/hdp/ | xargs  -d ' '  -I {}  echo {}

/home/wwwroot/aa/public_html/templets/wap/images/index/hdp/

/home/wwwroot/bb/public_html/templets/wap/images/index/hdp/

/home/wwwroot/cc/public_html/templets/wap/images/index/hdp/

[root@ebs-25879 ~]#