xargs命令使用

xargs命令是给其他命令传递参数的一个过滤器,也是组合多个命令的一个工具。它擅长将标准输入数据转换成命令行参数,xargs能够处理管道或者stdin并将其转换成特定命令的命令参数。xargs也可以将单行或多行文本输入转换为其他格式,例如多行变单行,单行变多行。xargs的默认命令是echo,空格是默认定界符。这意味着通过管道传递给xargs的输入将会包含换行和空白,不过通过xargs的处理,换行和空白将被空格取代。xargs是构建单行命令的重要组件之一。

1、xargs主要参数

选项 含义
-0 当 stdin 含有特殊子元的时候,将其当成一般字符
-a file 从文件中读入作为 stdin
-e flag 注意有的时候可能会是-E,flag 必须是一个以空格分割的标志,当 xargs 分析到含有 flag 这个标志的时候就停止
-p 当每次执行一个 argument 的时候咨询问一次用户.
-n num 后面加次数,表示命令在执行的时候一次用 arguments 的个数,默认是用所有的.
-t 便是先打印命令,然后在执行
-i 或者是-I,将 xargs 的每项名称,一般是一行一行的赋值给{},可以用{}代替
-r no-run-if-enpty 当 xargs 的输入为空的时候则停止 xargs,不用再去执行了
-s num 命令行的最大字符数
-d delim 分隔符,默认的 xargs 分隔符是回车,argument 的分隔符是空格,这里修改的是 xargs 的分隔符
-x exit 的意思,主要是匹配-s 使用
-P 修改最大的进程数,默认是 1,为 0 的时候使用全部

2、使用例子

2.1 在当前目录下查找所有用户具有读、写和执行权限的文件,并收回相应的写权限
[root@localhost test]# ll
总计 312
-rw-r--r-- 1 root root 302108 11-03 06:19 log2012.log
-rw-r--r-- 1 root root      0 11-12 22:25 log2013.log
-rw-r--r-- 1 root root      0 11-12 22:25 log2014.log
drwxr-xr-x 6 root root   4096 10-27 01:58 scf
drwxrwxrwx 2 root root   4096 11-12 19:32 test3
drwxrwxrwx 2 root root   4096 11-12 19:32 test4
[root@localhost test]# find . -perm -7 -print | xargs chmod o-w
[root@localhost test]# ll
总计 312
-rw-r--r-- 1 root root 302108 11-03 06:19 log2012.log
-rw-r--r-- 1 root root      0 11-12 22:25 log2013.log
-rw-r--r-- 1 root root      0 11-12 22:25 log2014.log
drwxr-xr-x 6 root root   4096 10-27 01:58 scf
drwxrwxr-x 2 root root   4096 11-12 19:32 test3   #这里的write权限没了
drwxrwxr-x 2 root root   4096 11-12 19:32 test4

需要注意的是,如果有一些文件名或者其他有意义的名词内含空白子元的时候,xargs 可能会出现误判。如下:

$ touch 'file 1.log' ‘file 2.log’  
$ ll  
总用量 0  
-rw-r--r-- 1 root root 0 7月  13 10:18 file 1.log  
-rw-r--r-- 1 root root 0 7月  13 10:18 file 2.log  
$ find -name '*.log'  
./file 2.log  
./file 1.log  
$ find -name '*.log' | xargs rm  
rm: 无法删除"./file": 没有那个文件或目录  
rm: 无法删除"2.log": 没有那个文件或目录  
rm: 无法删除"./file": 没有那个文件或目录  
rm: 无法删除"1.log": 没有那个文件或目录  

原因很简单,xargs 默认是以空白字符(空格,tab,换行符)来分割记录的,因此文件名 ./file 1.log 被解释成了两个记录./file 和 1.log,因此 rm 找不到这两个文件。
为了解决此类问题,聪明的人类想出了一个办法,让 find 在打印出一个文件名之后接着输出一个 null 字符(‘ ’)而不是换行符,然后再告诉 xargs 也用 null 字符来作为记录的分隔符,这就是 find 的-print 和 xargs 的-0选项.
$ find -name '*.log' -print0 | xargs -0 rm

2.2 使用-i参数默认的前面输出用{}代替,-I参数可以指定其他代替字符
[root@localhost test]# ll
总计 12drwxr-xr-x 6 root root 4096 10-27 01:58 scf
drwxrwxr-x 2 root root 4096 11-13 05:50 test3
drwxrwxr-x 2 root root 4096 11-13 05:50 test4
[root@localhost test]# cd test4
[root@localhost test4]# find . -name "file" | xargs -I [] cp [] ..
[root@localhost test4]# ll
总计 304
-rw-r--r-- 1 root root 302108 11-12 22:54 log2012.log
-rw-r--r-- 1 root root     61 11-12 22:54 log2013.log
-rw-r--r-- 1 root root      0 11-12 22:54 log2014.log
[root@localhost test4]# cd ..
[root@localhost test]# ll
总计 316
-rw-r--r-- 1 root root 302108 11-13 06:03 log2012.log
-rw-r--r-- 1 root root     61 11-13 06:03 log2013.log
-rw-r--r-- 1 root root      0 11-13 06:03 log2014.log
drwxr-xr-x 6 root root   4096 10-27 01:58 scf
drwxrwxr-x 2 root root   4096 11-13 05:50 test3
drwxrwxr-x 2 root root   4096 11-13 05:50 test4

这里使用的是-I []参数,使用-i参数可以达到同样的效果:
find . -name "file" | xargs -i cp {} ..

2.3 find后执行xargs提示xargs: argument line too long解决方法
[root@pd test4]#  find . -type f -atime +0 -print0 | xargs -0 -l1 -t rm -f
rm -f 

-l1是一次处理一个;-t是处理之前打印出命令

2.4 使用 -n number 指定每次给后面的命令多少参数
[13:00 sxuan@hulab ~]$ echo '11@22@33@44@55@66@77@88@99@00' | xargs -d '@' -n 3 echo
11 22 33
44 55 66
77 88 99
00

-n表示将xargs生成的命令行参数,每次传递几个参数给其后面的命令执行,例如如果xargs从标准输入中读入内容,然后以分隔符分割之后生成的命令行参数有10个,使用 -n 3 之后表示一次传递给xargs后面的命令是3个参数,因为一共有10个参数,所以要执行4次,才能将参数用完。
-d选项指定特定的分隔符。

2.5 并行下载文件
cat url_file |xargs -n 3 -P 10 aria2c -Z

每次使用10个线程并行下载3个文件。

2.6文件重命名
# 把所有以.json为后缀的文件mv到bak目录;如果json文件太多,直接mv *.json bak是不行的。
find . -type f -name "*.json"|xargs -n10 -I% mv % bak
# 把所有json文件重命名为以BAK结尾。find可以使用正则匹配,从而实现更多灵活性。
find . -type f -name "*.json"|xargs -n10 -I% mv % %.BAK
# 对所有json文件进行sed替换,把其中的_id都换成ID,同时原文件变成.bak后缀文件。
find . -type f -name "*.json"|xargs -n3 sed -i.bak  's/\_id/ID/g'

参考:
每天一个linux命令(21):find命令之xargs
shell 学习
xargs命令详解,xargs与管道的区别
Linux中,关于find结合xargs/parallel的妙用有? (同时要是实用的,不炫技的)

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,088评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,715评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,361评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,099评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 60,987评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,063评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,486评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,175评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,440评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,518评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,305评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,190评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,550评论 3 298
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,880评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,152评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,451评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,637评论 2 335

推荐阅读更多精彩内容