我們可以用管道將一個命令的stdout(標準輸出)重定向到另一個命令的stdin(標準輸入)。例如:
$cat foo.txt | grep “test”
但是,有些命令只能以命令行參數的形式接受收據,而無法通過stdin接受數據流。在這種情況下,我們沒法用管道來提供那些只有通過命令行參數才能提供的數據。
只有另闢蹊徑。xargs是一個很有用的命令,它擅長將標準輸入數據轉換成命令行參數。
單行命令是一個命令序列,各命令之間不使用分號,而是使用管道操作符進行連接。精心編寫的單行命令可以更高效、更簡捷地完成任務。就文本處理而言,需要具備紮實的理論和實踐才能夠寫出適合的單行命令解決方法。xargs就是構建單行命令的重要組件之一。
xargs命令用該緊跟在管道操作符之後。它以標準輸入作爲主要的源數據流。
command | xargs
----->>
xargs命令能將stdin接收到的數據重新格式化,再將其作爲參數提供給其他命令。
xargs如何格式化數據:
-d選項,指明定界符
-n選項,指明每行最大的參數數量n
範例:將多行輸入轉換成單行輸出
只需將換行符移除,在用” ”(空格)進行替換,就可以實現。xargs默認將空格作爲定界符。xargs沒有指定參數時,默認能將換行符替換成空格。
$cat example.txt
1 2 3 4 5 6
7 8 9 10
11 12
$catexample.txt | xargs
1 2 3 4 5 6 7 8 9 10 11 12
範例:將單行輸入轉換成多行輸出
$cat examole.txt | xargs -n 3
1 2 3
4 5 6
7 8 9
10 11 12
$echo “splitXsplitXsplitXsplit” | xargs -d X
split splitsplit split
$echo “splitXsplitXsplitXsplit” | xargs -d X –n 2
split split
split split
xargs的初衷是將參數列表轉換成小塊分段傳給其他命令,以避免參數列表過長。
編制一個定製版的echo來更好的理解xargs。
#!/bin/bash
#myecho.sh
echo $*’#’
當參數被傳遞給myecho.sh後,它會將這些參數打印出來,並以#字符作爲結尾。例如:
$./myecho.sh arg1 arg2
arg1 arg2#
看下面問題:
有一個包含參數列表的文件(每行一個參數)。
每次提供一個參數:
./myecho.sh arg1
./myecho.sh arg2
./myecho.sh arg3
每次提供多個參數:
./myecho.sh arg1 arg2
./myecho.sh arg3
一次性提供:
./myecho.sh arg1 arg2 arg3
上面的問題,也可以用xargs實現。我們將參數保存到args.txt。
$cat args.txt
arg1
arg2
arg3
$cat args.txt | xargs -n 1 ./myecho.sh
arg1#
arg2#
arg3#
通過#號,可以知道myecho.sh運行了3次。
$cat args.txt | xargs -n 2 ./myecho.sh
arg1 arg2#
arg3#
#catargs.txt | xargs ./myecho.sh
arg1 arg2 arg3#
xargs不加參數時,默認將換行符替換成空格。就好像是默認,爲這種,從參數列表文件中獲取參數提供方便服務的。(想想,如果沒有這種默認服務,那麼想要將擁有多行文本的args.txt中的參數一次性提取,你會怎麼做?)
上面例子中,我們直接爲myecho.sh提供參數。這些參數都源於args.txt文件。但實際上除了它們外,我們還需要一些固定不變的命令參數。思考下面這種命令格式:
./myecho.sh -p arg1 –l
在上面的命令執行過程中,arg1是唯一的可變文本,其餘部分保持不變。我們應該從args.txt中讀取參數,並按照下面的方式提供給命令:
./myecho.sh -p arg1 -l
./myecho.sh -p arg2 -l
./myecho.sh -p arg3 -l
xargs有一個選項-I,可以提供上面這種形式的命令執行序列。我們可以用-I執行一個替換字符串,這個字符串在xargs擴展時會被替換掉。當-I與xargs結合使用,對於每一個參數命令都會執行一次。
$cat args.txt | xargs -I {} ./myecho.sh -p {} -l
-p arg1 -l#
-p arg2 -l#
-p arg3 -l#
結合find使用xargs:
兩者結合使用可以讓任務變得更輕鬆。不過,人們通常卻是以一種錯誤的組合方式使用它們。例如:
$find . –type f -name “*.txt” -print | xargs rm -f
這樣做很危險。有時可能會刪除不必要刪除的文件。我們沒法預測分隔find命令輸出結果的定界符究竟是’\n’還是’ ‘(空格)。很多文件名中都可能會包含空格符,而xargs很可能會誤認爲它們是定界符(例如,hell text.txt會被xargs誤認爲hell和text.txt)。
只要我們把find的輸出作爲xargs的輸入,就必須將-print0與find結合使用,以字符null來分隔輸出。
用find匹配並列出所有.txt文件,然後用xargs將這些文件刪除:
$find . –type f -name “*.txt” -print0 | xargs -0 rm -f
刪除所有txt文件。xargs -0將\0作爲輸入定界符。
統計所有C程序文件的行數:
$find code_path -type -f -name “*.c” -print0 | xargs -0 wc -l