1. Sed簡介
sed 是一種在線編輯器,它一次處理一行內容。處理時,把當前處理的行存儲在臨時緩衝區中,稱爲“模式空間”(pattern space),接着用sed命令處理緩衝區中的內容,處理完成後,把緩衝區的內容送往屏幕。接着處理下一行,這樣不斷重複,直到文件末尾。文件內容並沒有 改變,除非你使用重定向存儲輸出。Sed主要用來自動編輯一個或多個文件;簡化對文件的反覆操作;編寫轉換程序等。以下介紹的是Gnu版本的Sed 3.02。
2. 定址
可以通過定址來定位你所希望編輯的行,該地址用數字構成,用逗號分隔的兩個行數表示以這兩行爲起止的行的範圍(包括行數表示的那兩行)。如1,3表示1,2,3行,美元符號($)表示最後一行。範圍可以通過數據,正則表達式或者二者結合的方式確定 。
3.Sed命令
調用sed命令有兩種形式: * sed [options] 'command' file(s) * sed [options] -f scriptfile file(s) a 在當前行後面加入一行文本。 b lable 分支到腳本中帶有標記的地方,如果分支不存在則分支到腳本的末尾。 c 用新的文本改變本行的文本。 d 從模板塊(Pattern space)位置刪除行。 D 刪除模板塊的第一行。 i 在當前行上面插入文本。 h 拷貝模板塊的內容到內存中的緩衝區。 H 追加模板塊的內容到內存中的緩衝區 g 獲得內存緩衝區的內容,並替代當前模板塊中的文本。 G 獲得內存緩衝區的內容,並追加到當前模板塊文本的後面。 l 列表不能打印字符的清單。 n 讀取下一個輸入行,用下一個命令處理新的行而不是用第一個命令。 N 追加下一個輸入行到模板塊後面並在二者間嵌入一個新行,改變當前行號碼。 p 打印模板塊的行。 P(大寫) 打印模板塊的第一行。 q 退出Sed。 r file 從file中讀行。 t label if分支,從最後一行開始,條件一旦滿足或者T,t命令,將導致分支到帶有標號的命令處,或者到腳本的末尾。 T label 錯誤分支,從最後一行開始,一旦發生錯誤或者T,t命令,將導致分支到帶有標號的命令處,或者到腳本的末尾。 w file 寫並追加模板塊到file末尾。 W file 寫並追加模板塊的第一行到file末尾。 ! 表示後面的命令對所有沒有被選定的行發生作用。 s/re/string 用string替換正則表達式re。 = 打印當前行號碼。 # 把註釋擴展到下一個換行符以前。 以下的是替換標記 g 表示行內全面替換。 p 表示打印行。 w 表示把行寫入一個文件。 x 表示互換模板塊中的文本和緩衝區中的文本。 y 表示把一個字符翻譯爲另外的字符(但是不用於正則表達式)
4.選項
-e,command, --expression=command 允許多臺編輯。 -h, --help 打印幫助,並顯示bug列表的地址。 -n, --quiet, --silent 取消默認輸出。 -f, --filer=script-file 引導sed腳本文件名。 -V, --version 打印版本和版權信息。
5.元字符
^ 錨定行的開始 $ 錨定行的結束 . 匹配一個非換行符的字符 * 匹配零或多個字符 [] 匹配一個指定範圍內的字符 [^] 匹配一個不在指定範圍內的字符 \(..\) 保存匹配的字符 & 保存搜索字符用來替換其他字符,如s/love/**&**/,love這成**love**。 \< 錨定單詞的開始,如:/\<love/匹配包含以love開頭的單詞的行。 \> 錨定單詞的結束,如/love\>/匹配包含以love結尾的單詞的行。 x\{m\} 重複字符x,m次,如:/0\{5\}/匹配包含5個o的行。 x\{m,\} 重複字符x,至少m次,如:/o\{5,\}/匹配至少有5個o的行。 x\{m,n\} 重複字符x,至少m次,不多於n次,如:/o\{5,10\}/匹配5--10個o的行。
6.實列
刪除:d命令 $ sed '2d' testfile 刪除testfile文件的第二行。 $ sed '2,$d' testfile 刪除testfile文件的第二行到末尾所有行。 $ sed '$d' testfile 刪除testfile文件的最後一行。 $ sed '/test/'d testfile 刪除testfile文件所有包含test的行。 替換:s命令 $ sed 's/abc/efg/g' testfile 在整行範圍內把abc替換爲efg。如果無g標記,則只有每行第一個匹配的abc被替換成efg。 $ sed -n 's/^test/mytest/p' testfile (-n)選項和p標誌一起使用表示只打印那些發生替換的行。也就是說,如果某一行開頭的test被替換成mytest,就打印它。 $ sed 's/^192.168.0.1/&localhost/' testfile &符號表示替換換字符串中被找到的部份。所有以192.168.0.1開頭的行都會被替換成它自已加 localhost,變成192.168.0.1localhost。 $ sed -n 's/\(love\)able/\1rs/p' testfile love被標記爲1,所有loveable會被替換成lovers,而且替換的行會被打印出來。 $ sed 's#10#100#g' example 不論什麼字符,緊跟着s命令的都被認爲是新的分隔符,所以,“#”在這裏是分隔符,代替了默認的“/”分隔符。表示把所有10替換成100。 選定行的範圍:逗號 $ sed -n '/test/,/check/p' testfile 所有在模板test和check所確定的範圍內的行都被打印。 $ sed -n '5,/^test/p' testfile 打印從第五行開始到第一個包含以test開始的行之間的所有行。 $ sed '/test/,/check/s/$/sed test/' testfile 對於模板test和west之間的行,每行的末尾用字符串sed test替換。 多點編輯:e命令 $ sed -e '1,5d' -e 's/test/check/' testfile (-e)選項允許在同一行裏執行多條命令。如例子所示,第一條命令刪除1至5行,第二條命令用check替換test。命令的執 行順序對結果有影響。如果兩個命令都是替換命令,那麼第一個替換命令將影響第二個替換命令的結果。 $ sed --expression='s/test/check/' --expression='/love/d' testfile 一個比-e更好的命令是--expression。它能給sed表達式賦值。 讀入:r命令 $ sed '/test/r file' file裏的內容被讀進來,顯示在與test匹配的行後面,如果匹配多行,則file的內容將顯示在所有匹配行的下面。 寫入:w命令 $ sed -n '/test/w file' testfile 在example中所有包含test的行都被寫入file裏。 追加:a命令 $ sed '/^test/a\\--->this is a example' testfile 'this is a example'被追加到以test開頭的行後面,sed要求命令a後面有一個反斜槓。 插入:i命令 $ sed '/test/i\\ new line -------------------------' testfile 如果test被匹配,則把反斜槓後面的文本插入到匹配行的前面。 換行:n命令 $ sed '/test/{ n; s/aa/bb/; }' 如果test被匹配,則移動到匹配行的下一行,替換這一行的aa,變爲bb,並打印該行,然後繼續。 變形:y命令 $ sed '1,10y/abcde/ABCDE/' 把1--10行內所有abcde轉變爲大寫,注意,正則表達式元字符不能使用這個命令。 退出:q命令 $ sed '10q' 打印完第10行後,退出sed。 保持和獲取:h命令和G命令 * $ sed -e '/test/h' -e '$G 在sed處理文件的時候,每一行都被保存在一個叫模式空間的臨時緩衝區中,除非行被刪除或者輸出被取消,否則所有被處理的行都將 打印在屏幕上。接着模式空間被清空,並存入新的一行等待處理。在這個例子裏,匹配test的行被找到後,將存入模式空間,h命令將其複製並存入一個稱爲保 持緩存區的特殊緩衝區內。第二條語句的意思是,當到達最後一行後,G命令取出保持緩衝區的行,然後把它放回模式空間中,且追加到現在已經存在於模式空間中 的行的末尾。在這個例子中就是追加到最後一行。簡單來說,任何包含test的行都被複制並追加到該文件的末尾。 保持和互換:h命令和x命令 $ sed -e '/test/h' -e '/check/x' 互換模式空間和保持緩衝區的內容。也就是把包含test與check的行互換。
7.聯繫題
重命令文件夾內的xx.bak文件爲xx ls -l | sed -n '/bak$/s#.* \(.*\).bak$#\1#p'| xargs -i mv {}.bak {} 把test.txt中第一個單詞和最後一個單詞調換位置 sed -r 's#(^[^:]+)(:.*\/)([a-z]+$)#\3\2\1#g' /etc/passwd 把test.txt中出現的第一個數字和最後一個單詞替換位置 sed -r 's#([0-9])(.*\/)([a-z]+$)#\3\2\1#g' /etc/passwd 把test.txt 中第一個數字移動到行末尾 sed -r 's#([0-9])(.*$)#\2\1#' /etc/passwd 行首單詞小寫換大寫 head passwd |sed -r 's/^[a-z]+/\U&/g' 行首字母小寫換大寫 head passwd |sed -r 's/^[a-z]+/\u&/g' 行首字母大寫變小寫 sed -r 's/^[A-Z]+/\l&/g' passwd 行首單詞大寫變小寫 sed -r 's/^[A-Z]+/\L&/g' passwd