linux之xargs詳解

xargs 可以將管道或標準輸入(stdin)數據轉換成命令行參數,也能夠從文件的輸出中讀取數據。

xargs 默認是以空白字符 (空格, TAB, 換行符) 來分割記錄的,這意味着通過管道傳遞給 xargs 的輸入將被分隔成爲 arguments 。所以,如果有一些文件記錄或者是其它意義的名詞內含有空白字符的時候,xargs 可能就會誤判了。

xargs 也可以將單行或多行文本輸入轉換爲其他格式,例如多行變單行,單行變多行。

xargs 是一個強有力的命令,它能夠捕獲一個命令的輸出,然後傳遞給另外一個命令。

之所以能用到這個命令,關鍵是由於很多命令不支持|管道來傳遞參數,而日常工作中有有這個必要,所以就有了 xargs 命令,例如:

find /sbin -perm +700 |ls -l       #這個命令是錯誤的
find /sbin -perm +700 |xargs ls -l   #這樣纔是正確的

xargs 一般是和管道一起使用。

命令格式:

somecommand |xargs -item  command

xargs的默認命令是echo,空格是默認定界符,默認替換符號是{}。

參數:

  • -a file 從文件中讀入作爲sdtin
  • -e flag ,注意有的時候可能會是-E,flag必須是一個以空格分隔的標誌,當xargs分析到含有flag這個標誌的時候就停止。
  • -p 當每次執行一個argument的時候詢問一次用戶。
  • -t 表示先打印命令,然後再執行。
  • -n num 後面加次數,表示命令在執行的時候每次傳遞給command命令的參數個數,默認是用所有的。參數以空白字符或<newline>換行符分割,-L 和 -n 標誌是互相排斥的,以最後指定的標誌生效。
  • -i 或者是-I,這得看linux支持了,選項告訴 xargs 可以使用{}代替傳遞過來的參數,建議使用-I,其符合POSIX標準。
  • -l 格式: xargs  -I  rep-str  comand  rep-srt ,rep-str 爲代替傳遞給的xargs參數,可以使 {} $ @ 等符號,其主要作用是當xargs   command 後有多個參數時,調整參數位置。例如:find  . -name  "*.txt "  |xargs -I {}  cp {} /tmp   
  • -L num 從標準輸入一次讀取num行送給Command命令 ,-L num和-l num功能一樣,不建議使用。
  • -r no-run-if-empty 當xargs的輸入爲空的時候則停止xargs,不用再去執行了。
  • -s num 命令行的最大字符數,指的是 xargs 後面那個命令的最大命令行字符數。
  • -d delim 分隔符,默認的xargs分隔符是回車,argument的分隔符是空格,這裏修改的是xargs的分隔符。
  • -x exit的意思,主要是配合-s使用。。
  • -P 修改最大的進程數,默認是1,爲0時候爲as many as it can ,這個例子我沒有想到,應該平時都用不到的吧。

實例

xargs 用作替換工具,讀取輸入數據重新格式化後輸出。

定義一個測試文件,內有多行文本數據:

# cat test.txt

a b c d e f g
h i j k l m n
o p q
r s t
u v w x y z

多行輸入單行輸出:

# cat test.txt | xargs
a b c d e f g h i j k l m n o p q r s t u v w x y z

-n 選項多行輸出:

# cat test.txt | xargs -n3

a b c
d e f
g h i
j k l
m n o
p q r
s t u
v w x
y z

-d 選項可以自定義一個定界符:

# echo "nameXnameXnameXname" | xargs -dX

name name name name

結合 -n 選項使用:

# echo "nameXnameXnameXname" | xargs -dX -n2

name name
name name

讀取 stdin,將格式化後的參數傳遞給命令

假設一個命令爲 sk.sh 和一個保存參數的文件 arg.txt:

#!/bin/bash
#sk.sh命令內容,打印出所有參數。

echo $*

arg.txt文件內容:

# cat arg.txt

aaa
bbb
ccc

xargs 的一個選項 -I,使用 -I 指定一個替換字符串 {},這個字符串在 xargs 擴展時會被替換掉,當 -I 與 xargs 結合使用,每一個參數命令都會被執行一次:

# cat arg.txt | xargs -I {} ./sk.sh -p {} -l

-p aaa -l
-p bbb -l
-p ccc -l

複製所有圖片文件到 /data/images 目錄下:

ls *.jpg | xargs -n1 -I {} cp {} /data/images

xargs 結合 find 使用

用 rm 刪除太多的文件時候,可能得到一個錯誤信息:/bin/rm Argument list too long. 用 xargs 去避免這個問題:

find . -type f -name "*.log" -print0 | xargs -0 rm -f

xargs -0 將 \0 作爲定界符。

統計一個源代碼目錄中所有 php 文件的行數:

find . -type f -name "*.php" -print0 | xargs -0 wc -l

查找所有的 jpg 文件,並且壓縮它們:

find . -type f -name "*.jpg" -print | xargs tar -czvf images.tar.gz

xargs 其他應用

假如你有一個文件包含了很多你希望下載的 URL,你能夠使用 xargs下載所有鏈接:

# cat url-list.txt | xargs wget -c

多行內容的單輸出且每行3個

1

[root@localhost ftl]# cat /home/omc/ftl/logs.txt |xargs -n3

image

查找系統中的每一個普通文件,然後使用xargs命令來測試它們分別屬於哪類文件

1

[root@localhost log]# find /home/omc/ -maxdepth 1 -user root -type f | xargs file {}

image

在/var/log/下查找log文件,複製文件到/home/omc/ftl且把結果保存到/home/omc/ftl/logs.txt文件中

1

2

3

4

[root@localhost log]# find /var/log/*.log -type f | xargs -i cp {} /home/omc/ftl

[root@localhost log]# ll -ltr /home/omc/ftl

[root@localhost log]# find /var/log/*.log -type f > /home/omc/ftl/logs.txt

[root@localhost log]# ll /home/omc/ftl/logs.txt

image

刪除 /home/omc/ftl/下的log文件

1

2

[root@localhost ftl]# ll *.log |xargs rm -rf {}     【錯誤】

[root@localhost ftl]# ls *.log |xargs rm -rf {}     【正確】

image

在當前目錄下查找所有用戶權限644的文件,並更改權限600

1

2

3

[root@localhost ftl]# ll *.txt

[root@localhost ftl]# find /home/omc/ftl -perm 644 | xargs chmod 600

[root@localhost ftl]# ll *.txt

image

 

用grep命令在當前目錄下的所有普通文件中搜索omc這個詞

1

2

find /etc/ -name \* -type f |xargs grep "omc"  >/tmp/ftl

    ==>find /etc/ -name "*" -type f |xargs grep "omc"  >/tmp/ftl

image

使用-i參數默認的前面輸出用{}代替,-I參數可以指定其他代替字符,如例子中的[]

find /var/ -name "*.log" |xargs -I [] cp [] /tmp/ 【xargs 默認用是i表示{},用I可以替換符號】

ll -ltr /tmp/ | more 5

image

xargs的-p參數的使用

find . -name "*.log" |xargs -p -i cp {} ../ltesig/

【-p參數會提示讓你確認是否執行後面的命令,y執行,n不執行】

image

利用for循環實現和xargs同樣的效果

1

2

find /home/omc/ -name *.txt | xargs    -i cp {} /home/omc/h

cat logs.txt |while read line;do echo $line >> logs_bak.txt; done;

image

利用xargs關閉不常用的系統啓動軟件

1

chkconfig | awk '{print $1}' | grep -Ev "sshd|network|crond|sysstat|rsyslog" | xargs -I{} chkconfig {} off

 

image

xargs總結示範:

1

2

3

4

5

find . -name "*.log" |xargs -p -i cp {} ../ltesig/ 【正確】

find . -name "*.log" |xargs -p cp {} ../ltesig/    【錯誤】

find . -type f -print | xargs file                 【正確】

find . -type f -print | xargs rm {}     【錯誤】

總結一下:如果命令後面可以跟內容,且沒有目的路徑的時候,可以省略-i,否則得加上

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章