Linux命令-xargs

xargs 命令 是给其他命令传递参数的一个过滤器,也是组合多个命令的一个工具。它擅长将标准输入数据转换成命令行参数,xargs 能够处理管道或者 stdin 并将其转换成特定命令的命令参数。xargs 也可以将单行或多行文本输入转换为其他格式,例如多行变单行,单行变多行。xargs 的默认命令是 echo,空格是默认定界符。这意味着通过管道传递给 xargs 的输入将会包含换行和空白,不过通过 xargs 的处理,换行和空白将被空格取代。xargs 是构建单行命令的重要组件之一。

主要参数

1
2
3
4
5
6
7
8
9
-d 为输入指定一个定制的分割符
-i 用 {} 代替传递的数据
-I string 用string来代替传递的数据-n[数字]设置每次传递几行数据
-n 选项限制单个命令行的参数个数
-t 显示执行详情
-p 交互模式
-P n 允许的最大线程数量为n
-s[大小] 设置传递参数的最大字节数(小于131072字节)
-x 大于 -s 设置的最大长度结束 xargs命令执行

用法实例

  • xargs 用作替换工具,读取输入数据重新格式化后输出

定义一个测试文件,内有多行文本数据:

1
2
3
4
5
6
cat test.txt
a b c d e f g
h i j k l m n
o p q
r s t
u v w x y z

多行输入单行输出:

1
2
cat test.txt | xargs
a b c d e f g h i j k l m n o p q r s t u v w x y z
  • 使用 -n 进行多行输出

-n 选项 多行输出:

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
cat test.txt | xargs -n 3
a b c
d e f
g h i
j k l
m n o
p q r
s t u
v w x
y z
  • 使用 -d 分割输入

-d 选项 可以自定义一个定界符:

1
2
echo "nameXnameXnameXname" | xargs -d "X"
name name name name

结合 -n 选项 使用:

1
2
3
echo "nameXnameXnameXname" | xargs -dX -n2
name name
name name
  • 读取 stdin

读取 stdin,将格式化后的参数传递给命令

假设一个命令为 sk.sh 和一个保存参数的文件 arg.txt:

1
2
#!/bin/bash
echo $*

arg.txt 文件内容:

1
2
3
4
cat arg.txt
aaa
bbb
ccc

xargs 的一个 选项 -I ,使用 -I 指定一个替换字符串{},这个字符串在 xargs 扩展时会被替换掉,当 -I 与 xargs 结合使用,每一个参数命令都会被执行一次:

1
2
3
4
cat arg.txt | xargs -I {} ./sk.sh -p {} -l
-p aaa -l
-p bbb -l
-p ccc -l

复制所有图片文件到 /data/images 目录下:

1
ls *.jpg | xargs -n1 -I cp {} /data/images
  • xargs 结合 find 命令使用

用 rm 删除太多的文件时候,可能得到一个错误信息:/bin/rm Argument list too long。用 xargs 去避免这个问题:

1
find . -type f -name "*.log" -print0 | xargs -0 rm -f

find 命令默认接的命令是 -print,它默认以 \n 将找到的文件分隔。可以使用 -print0 来使用 \0 分隔,这样就不会分行了。

xargs -0 将 \0 作为定界符。

统计一个源代码目录中所有 php 文件的行数:

1
find . -type f -name "*.php" -print0 | xargs -0 wc -l

查找所有的 jpg 文件,并且压缩它们:

1
find . -type f -name "*.jpg" -print | xargs tar -czvf images.tar.gz
  • 打印出执行的命令

结合 -t 选项可以打印出 xargs 执行的命令

1
ls | xargs -t -I{} echo {}

会输出当前目录下的文件列表和执行的 echo 命令

使用 -p 选项确认执行的命令

-p 选项会在执行每一个命令时弹出确认,当你需要非常准确的确认每一次操作时可以使用 -p 参数,比如,查找当前目录下 .log 文件,每一次删除都需要确认:

1
find . -maxdepth 1 -name "*.log" | xargs -p -I{} rm {}
  • 执行多个命令

使用 -I 选项可以让 xargs 执行多个命令

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
cat foo.txt
one
two
three

cat foo.txt | xargs -I % sh -c 'echo %; mkdir %'
one
two
three

ls
one two three

sh -c 命令解释器(这里是/bin/sh) 有两种工作模式:交互模式和非交互模式,与终端进行交互执行命令的方式就称为交互模式,通过命令解释器来执行命令为非交互式。

  • 其他应用

假如你有一个文件包含了很多你希望下载的 URL,你能够使用 xargs 下载所有链接:

1
cat url-list.txt | xargs wget -c
  • 子 Shell(Subshells)

运行一个 shell 脚本时会启动另一个命令解释器,就好像你的命令是在命令行提示下被解释的一样,类似于批处理文件里的一系列命令。每个 shell 脚本有效地运行在父 shell(parent shell) 的一个子进程里。这个父 shell 是指在一个控制终端或在一个 xterm 窗口中给你命令指示符的进程。

1
cmd1 | ( cmd2; cmd3; cmd4 ) | cmd5

如果 cmd2 是 cd /,那么就会改变子 Shell 的工作目录,这种改变只是局限于子 shell 内部,cmd5 则完全不知道工作目录发生的变化。子 shell 是嵌在圆括号 () 内部的命令序列,子 Shell 内部定义的变量为局部变量。

子 shell 可用于为一组命令设定临时的环境变量:

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
COMMAND1
COMMAND2
COMMAND3
(
  IFS=:
  PATH=/bin
  unset TERMINFO
  set -C
  shift 5
  COMMAND4
  COMMAND5
  exit 3 # 只是从子 shell 退出。
)
# 父 shell 不受影响,变量值没有更改。
COMMAND6
COMMAND7
支付宝
微信
0%