天天看點

linux sed指令1、sed指令

linux sed 檔案編輯指令

文章目錄

    • @[toc]
  • 1、sed指令
    • sed的選項、指令、替換标記
      • 選項
      • 參數
      • sed指令
      • sed替換标記
      • sed元字元集
    • sed用法執行個體
      • 替換操作:s指令
      • 全面替換标記g
      • 定界符
      • 删除操作:d指令
      • 已比對字元串标記&
      • 子串比對标記\1
      • 組合多個表達式
      • 引用
      • 標明行的範圍:,(逗号)
      • 多點編輯:e指令
      • 從檔案讀入:r指令
      • 寫入檔案:w指令
      • 追加(行下):a\指令
      • 插入(行上):i\指令
      • 下一個:n指令
      • 變形:y指令
      • 退出:q指令
      • 保持和擷取:h指令和G指令
      • 保持和互換:h指令和x指令
      • 腳本scriptfile
      • 列印奇數行或偶數行
      • 列印比對字元串的下一行

1、sed指令

檔案編輯

sed是一種流編輯器,它是文本進行中非常中的工具,能夠完美的配合正規表達式使用,功能不同凡響。處理時,把目前處理的行存儲在臨時緩沖區中,稱為“模式空間”(pattern space),接着用sed指令處理緩沖區中的内容,處理完成後,把緩沖區的内容送往螢幕。接着處理下一行,這樣不斷重複,直到檔案末尾。檔案内容并沒有 改變,除非你使用重定向存儲輸出。Sed主要用來自動編輯一個或多個檔案;簡化對檔案的反複操作;編寫轉換程式等。

sed的選項、指令、替換标記

指令格式

sed [options] 'command' file(s)
sed [options] -f scriptfile file(s)
           

選項

-e<script>或--expression=<script>:以選項中的指定的script來處理輸入的文本檔案;
-f<script檔案>或--file=<script檔案>:以選項中指定的script檔案來處理輸入的文本檔案;
-h或--help:顯示幫助;
-n或--quiet或——silent:僅顯示script處理後的結果;
-V或--version:顯示版本資訊。
           

參數

檔案:指定待處理的文本檔案清單。

sed指令

a\ 在目前行下面插入文本。
i\ 在目前行上面插入文本。
c\ 把標明的行改為新的文本。
d 删除,删除選擇的行。
D 删除模闆塊的第一行。
s 替換指定字元
h 拷貝模闆塊的内容到記憶體中的緩沖區。
H 追加模闆塊的内容到記憶體中的緩沖區。
g 獲得記憶體緩沖區的内容,并替代目前模闆塊中的文本。
G 獲得記憶體緩沖區的内容,并追加到目前模闆塊文本的後面。
l 清單不能列印字元的清單。
n 讀取下一個輸入行,用下一個指令處理新的行而不是用第一個指令。
N 追加下一個輸入行到模闆塊後面并在二者間嵌入一個新行,改變目前行号碼。
p 列印模闆塊的行。
P(大寫) 列印模闆塊的第一行。
q 退出Sed。
b lable 分支到腳本中帶有标記的地方,如果分支不存在則分支到腳本的末尾。
r file 從file中讀行。
t label if分支,從最後一行開始,條件一旦滿足或者T,t指令,将導緻分支到帶有标号的指令處,或者到腳本的末尾。
T label 錯誤分支,從最後一行開始,一旦發生錯誤或者T,t指令,将導緻分支到帶有标号的指令處,或者到腳本的末尾。
w file 寫并追加模闆塊到file末尾。  
W file 寫并追加模闆塊的第一行到file末尾。  
! 表示後面的指令對所有沒有被標明的行發生作用。  
= 列印目前行号碼。  
# 把注釋擴充到下一個換行符以前。  
           

sed替換标記

g 表示行内全面替換。  
p 表示列印行。  
w 表示把行寫入一個檔案。  
x 表示互換模闆塊中的文本和緩沖區中的文本。  
y 表示把一個字元翻譯為另外的字元(但是不用于正規表達式)
\1 子串比對标記
& 已比對字元串标記
           

sed元字元集

^ 比對行開始,如:/^sed/比對所有以sed開頭的行。
$ 比對行結束,如:/sed$/比對所有以sed結尾的行。
. 比對一個非換行符的任意字元,如:/s.d/比對s後接一個任意字元,最後是d。
* 比對0個或多個字元,如:/*sed/比對所有模闆是一個或多個空格後緊跟sed的行。
[] 比對一個指定範圍内的字元,如/[ss]ed/比對sed和Sed。  
[^] 比對一個不在指定範圍内的字元,如:/[^A-RT-Z]ed/比對不包含A-R和T-Z的一個字母開頭,緊跟ed的行。
\(..\) 比對子串,儲存比對的字元,如s/\(love\)able/\1rs,loveable被替換成lovers。
& 儲存搜尋字元用來替換其他字元,如s/love/**&**/,love這成**love**。
\< 比對單詞的開始,如:/\<love/比對包含以love開頭的單詞的行。
\> 比對單詞的結束,如/love\>/比對包含以love結尾的單詞的行。
x\{m\} 重複字元x,m次,如:/0\{5\}/比對包含5個0的行。
x\{m,\} 重複字元x,至少m次,如:/0\{5,\}/比對至少有5個0的行。
x\{m,n\} 重複字元x,至少m次,不多于n次,如:/0\{5,10\}/比對5~10個0的行。
           

sed用法執行個體

替換操作:s指令

替換文本中的字元串:

sed 's/book/books/' file
           

-n選項和p指令一起使用表示隻列印那些發生替換的行:

sed -n ‘s/test/TEST/p’ file

直接編輯檔案選項-i,會比對file檔案中每一行的第一個book替換為books:

sed -i 's/book/books/g' file
           

全面替換标記g

使用字尾 /g 标記會替換每一行中的所有比對:

sed 's/book/books/g' file
           

當需要從第N處比對開始替換時,可以使用 /Ng:

echo sksksksksksk | sed 's/sk/SK/2g'
skSKSKSKSKSK

echo sksksksksksk | sed 's/sk/SK/3g'
skskSKSKSKSK

echo sksksksksksk | sed 's/sk/SK/4g'
skskskSKSKSK
           

定界符

以上指令中字元 / 在sed中作為定界符使用,也可以使用任意的定界符:

sed 's:test:TEXT:g'
sed 's|test|TEXT|g'
           

定界符出現在樣式内部時,需要進行轉義:

sed 's/\/bin/\/usr\/local\/bin/g'
           

删除操作:d指令

删除空白行:

sed '/^$/d' file
           

删除檔案的第2行:

sed '2d' file
           

删除檔案的第2行到末尾所有行:

sed '2,$d' file
           

删除檔案最後一行:

sed '$d' file
           

删除檔案中所有開頭是test的行:

sed '/^test/'d file
           

已比對字元串标記&

正規表達式 \w+ 比對每一個單詞,使用 [&] 替換它,& 對應于之前所比對到的單詞:

echo this is a test line | sed 's/\w\+/[&]/g'
[this] [is] [a] [test] [line]
           

所有以192.168.0.1開頭的行都會被替換成它自已加localhost:

sed 's/^192.168.0.1/&localhost/' file
192.168.0.1localhost
           

子串比對标記\1

比對給定樣式的其中一部分:

echo this is digit 7 in a number | sed 's/digit \([0-9]\)/\1/'
this is 7 in a number
           

指令中 digit 7,被替換成了 7。樣式比對到的子串是 7,(…) 用于比對子串,對于比對到的第一個子串就标記為 \1,依此類推比對到的第二個結果就是 \2,例如:

echo aaa BBB | sed 's/\([a-z]\+\) \([A-Z]\+\)/\2 \1/'
BBB aaa
           

love被标記為1,所有loveable會被替換成lovers,并列印出來:

sed -n 's/\(love\)able/\1rs/p' file
           

組合多個表達式

sed '表達式' | sed '表達式'

等價于:

sed '表達式; 表達式'
           

引用

sed表達式可以使用單引号來引用,但是如果表達式内部包含變量字元串,就需要使用雙引号。

test=hello
echo hello WORLD | sed "s/$test/HELLO"
HELLO WORLD
           

標明行的範圍:,(逗号)

所有在模闆test和check所确定的範圍内的行都被列印:

sed -n '/test/,/check/p' file
           

列印從第5行開始到第一個包含以test開始的行之間的所有行:

sed -n '5,/^test/p' file
           

對于模闆test和west之間的行,每行的末尾用字元串aaa bbb替換:

sed '/test/,/west/s/$/aaa bbb/' file
           

多點編輯:e指令

-e選項允許在同一行裡執行多條指令:

sed -e '1,5d' -e 's/test/check/' file
           

上面sed表達式的第一條指令删除1至5行,第二條指令用check替換test。指令的執行順序對結果有影響。如果兩個指令都是替換指令,那麼第一個替換指令将影響第二個替換指令的結果。

和 -e 等價的指令是 --expression:

sed --expression='s/test/check/' --expression='/love/d' file
           

從檔案讀入:r指令

file裡的内容被讀進來,顯示在與test比對的行後面,如果比對多行,則file的内容将顯示在所有比對行的下面:

sed '/test/r file' filename
           

寫入檔案:w指令

在example中所有包含test的行都被寫入file裡:

sed -n '/test/w file' example
           

追加(行下):a\指令

将 this is a test line 追加到 以test 開頭的行後面:

sed '/^test/a\this is a test line' file
           

在 test.conf 檔案第2行之後插入 this is a test line:

sed -i '2a\this is a test line' test.conf
           

插入(行上):i\指令

将 this is a test line 追加到以test開頭的行前面:

sed '/^test/i\this is a test line' file
           

在test.conf檔案第5行之前插入this is a test line:

sed -i '5i\this is a test line' test.conf
           

下一個:n指令

如果test被比對,則移動到比對行的下一行,替換這一行的aa,變為bb,并列印該行,然後繼續:

sed '/test/{ n; s/aa/bb/; }' file
           

變形:y指令

把1~10行内所有abcde轉變為大寫,注意,正規表達式元字元不能使用這個指令:

sed '1,10y/abcde/ABCDE/' file
           

退出:q指令

列印完第10行後,退出sed

sed '10q' file
           

保持和擷取:h指令和G指令

在sed處理檔案的時候,每一行都被儲存在一個叫模式空間的臨時緩沖區中,除非行被删除或者輸出被取消,否則所有被處理的行都将 列印在螢幕上。接着模式空間被清空,并存入新的一行等待處理。

sed -e '/test/h' -e '$G' file
           

在這個例子裡,比對test的行被找到後,将存入模式空間,h指令将其複制并存入一個稱為保持緩存區的特殊緩沖區内。第二條語句的意思是,當到達最後一行後,G指令取出保持緩沖區的行,然後把它放回模式空間中,且追加到現在已經存在于模式空間中的行的末尾。在這個例子中就是追加到最後一行。簡單來說,任何包含test的行都被複制并追加到該檔案的末尾。

保持和互換:h指令和x指令

互換模式空間和保持緩沖區的内容。也就是把包含test與check的行互換:

sed -e '/test/h' -e '/check/x' file
           

腳本scriptfile

sed腳本是一個sed的指令清單,啟動Sed時以-f選項引導腳本檔案名。Sed對于腳本中輸入的指令非常挑剔,在指令的末尾不能有任何空白或文本,如果在一行中有多個指令,要用分号分隔。以#開頭的行為注釋行,且不能跨行。

sed [options] -f scriptfile file(s)
           

列印奇數行或偶數行

方法1:

sed -n 'p;n' test.txt  #奇數行
sed -n 'n;p' test.txt  #偶數行
           

方法2:

sed -n '1~2p' test.txt  #奇數行
sed -n '2~2p' test.txt  #偶數行
           

列印比對字元串的下一行

grep -A 1 SCC URFILE
sed -n '/SCC/{n;p}' URFILE
awk '/SCC/{getline; print}' URFILE
           

繼續閱讀