天天看點

《SED 單行腳本快速參考》的 awk 實作

文本間隔:

# 在每一行後面增加一空行

# 将原來的所有空行删除并在每一行後面增加一空行。

# 這樣在輸出的文本中每一行後面将有且隻有一空行。

# 在每一行後面增加兩行空行

# 将第一個腳本所産生的所有空行删除(即删除所有偶數行)

# 在比對式樣“regex”的行之前插入一空行

# 在比對式樣“regex”的行之後插入一空行

# 在比對式樣“regex”的行之前和之後各插入一空行

編号:

# 為檔案中的每一行進行編号(簡單的左對齊方式)。這裡使用了“制表符”

# (tab,見本文末尾關于’\t’的用法的描述)而不是空格來對齊邊緣。

# 對檔案中的所有行編号(行号在左,文字右端對齊)。

# 對檔案中的所有行編号,但隻顯示非空白行的行号。

# 計算行數 (模拟 “wc -l”)

文本轉換和替代:

# Unix環境:轉換DOS的新行符(CR/LF)為Unix格式。

# Unix環境:轉換Unix的新行符(LF)為DOS格式。

# DOS環境:轉換Unix新行符(LF)為DOS格式。

DOS環境的略過

# DOS環境:轉換DOS新行符(CR/LF)為Unix格式。

# 下面的腳本隻對UnxUtils sed 4.0.7 及更高版本有效。要識别UnxUtils版本的

# sed可以通過其特有的“–text”選項。你可以使用幫助選項(“–help”)看

# 其中有無一個“–text”項以此來判斷所使用的是否是UnxUtils版本。其它DOS

# 版本的的sed則無法進行這一轉換。但可以用“tr”來實作這一轉換。

# 将每一行前導的“空白字元”(空格,制表符)删除

# 使之左對齊

# 将每一行拖尾的“空白字元”(空格,制表符)删除

# 将每一行中的前導和拖尾的空白字元删除

# 在每一行開頭處插入5個空格(使全文向右移動5個字元的位置)

# 以79個字元為寬度,将所有文本右對齊

# 78個字元外加最後的一個空格

# 以79個字元為寬度,使所有文本居中。在方法1中,為了讓文本居中每一行的前

# 頭和後頭都填充了空格。 在方法2中,在居中文本的過程中隻在文本的前面填充

# 空格,并且最終這些空格将有一半會被删除。此外每一行的後頭并未填充空格。

# 在每一行中查找字串“foo”,并将找到的“foo”替換為“bar”

# 隻在行中出現字串“baz”的情況下将“foo”替換成“bar”

# 将“foo”替換成“bar”,并且隻在行中未出現字串“baz”的情況下替換

# 不管是“scarlet”“ruby”還是“puce”,一律換成“red”

# 倒置所有行,第一行成為最後一行,依次類推(模拟“tac”)。

# 由于某些原因,使用下面指令時HHsed v1.5會将檔案中的空行删除

# 将行中的字元逆序排列,第一個字成為最後一字,……(模拟“rev”)

# 将每兩行連接配接成一行(類似“paste”)

# 如果目前行以反斜杠“\”結束,則将下一行并到目前行末尾

# 并去掉原來行尾的反斜杠

# 如果目前行以等号開頭,将目前行并到上一行末尾

# 并以單個空格代替原來行頭的“=”

# 為數字字串增加逗号分隔符号,将“1234567”改為“1,234,567”

#awk的正則沒有後向比對和引用,搞的比較狼狽,呵呵。

# 為帶有小數點和負号的數值增加逗号分隔符(GNU sed)

#和上例差不多

# 在每5行後增加一空白行 (在第5,10,15,20,等行後增加一空白行)

選擇性地顯示特定行:

# 顯示檔案中的前10行 (模拟“head”的行為)

# 顯示檔案中的第一行 (模拟“head -1”指令)

# 顯示檔案中的最後10行 (模拟“tail”)

#用awk幹這個有點虧,得全文緩存,對于大檔案肯定很慢

# 顯示檔案中的最後2行(模拟“tail -2”指令)

# 顯示檔案中的最後一行(模拟“tail -1”)

#這個比較好辦,隻存最後一行了。

# 顯示檔案中的倒數第二行

#存兩行呗(當檔案中隻有一行時,輸出空行)

# 隻顯示比對正規表達式的行(模拟“grep”)

# 隻顯示“不”比對正規表達式的行(模拟“grep -v”)

# 查找“regexp”并将比對行的上一行顯示出來,但并不顯示比對行

# 查找“regexp”并将比對行的下一行顯示出來,但并不顯示比對行

# 顯示包含“regexp”的行及其前後行,并在第一行之前加上“regexp”所在行的行号 (類似“grep -A1 -B1”)

# 顯示包含“AAA”、“BBB”和“CCC”的行(任意次序)

# 顯示包含“AAA”、“BBB”和“CCC”的行(固定次序)

# 顯示包含“AAA”“BBB”或“CCC”的行 (模拟“egrep”)

# 顯示包含“AAA”的段落 (段落間以空行分隔)

# HHsed v1.5 必須在“x;”後加入“G;”,接下來的3個腳本都是這樣

# 顯示包含“AAA”“BBB”和“CCC”三個字串的段落 (任意次序)

# 顯示包含“AAA”、“BBB”、“CCC”三者中任一字串的段落 (任意次序)

# 顯示包含65個或以上字元的行

cat ll.txt | awk '{if(length($0)>=65)print}'

# 顯示包含65個以下字元的行

# 顯示部分文本——從包含正規表達式的行開始到最後一行結束

# 顯示部分文本——指定行号範圍(從第8至第12行,含8和12行)

# 顯示第52行

# 從第3行開始,每7行顯示一次

# 顯示兩個正規表達式之間的文本(包含)

選擇性地删除特定行:

# 顯示通篇文檔,除了兩個正規表達式之間的内容

# 删除檔案中相鄰的重複行(模拟“uniq”)

# 隻保留重複行中的第一行,其他行删除

# 删除檔案中的重複行,不管有無相鄰。注意hold space所能支援的緩存大小,或者使用GNU sed。

# 删除除重複行外的所有行(模拟“uniq -d”)

# 删除檔案中開頭的10行

# 删除檔案中的最後一行

#awk在過程中并不知道檔案一共有幾行,是以隻能通篇緩存,大檔案可能不适合,下面兩個也一樣

# 删除檔案中的最後兩行

# 删除檔案中的最後10行

# 删除8的倍數行

# 删除比對式樣的行

# 删除檔案中的所有空行(與“grep ‘.’ ”效果相同)

# 隻保留多個相鄰空行的第一行。并且删除檔案頂部和尾部的空行。

# (模拟“cat -s”)

# 隻保留多個相鄰空行的前兩行。

# 删除檔案頂部的所有空行

# 删除檔案尾部的所有空行

# 删除每個段落的最後一行

#很長,很ugly,應該有更好的辦法

特殊應用:

# 移除手冊頁(man page)中的nroff标記。在Unix System V或bash shell下使

# 用’echo’指令時可能需要加上 -e 選項。

# 提取新聞討論區或 e-mail 的郵件頭

# 提取新聞討論區或 e-mail 的正文部分

# 從郵件頭提取“Subject”(标題欄字段),并移除開頭的“Subject:”字樣

# 從郵件頭獲得回複位址

#好像是輸出第一個Reply-To:開頭的行?From是幹啥用的?不清楚規則。。

# 擷取郵件位址。在上一個腳本所産生的那一行郵件頭的基礎上進一步的将非電郵位址的部分剃除。(見上一腳本)

#取尖括号裡的東西吧?

# 在每一行開頭加上一個尖括号和空格(引用資訊)

# 将每一行開頭處的尖括号和空格删除(解除引用)

# 移除大部分的HTML标簽(包括跨行标簽)

# 将分成多卷的uuencode檔案解碼。移除檔案頭資訊,隻保留uuencode編碼部分。

# 檔案必須以特定順序傳給sed。下面第一種版本的腳本可以直接在指令行下輸入;

# 第二種版本則可以放入一個帶執行權限的shell腳本中。(由Rahul Dhesi的一

# 個腳本修改而來。)

#我不想裝個uudecode驗證,大緻寫個吧

# 将檔案中的段落以字母順序排序。段落間以(一行或多行)空行分隔。GNU sed使用

# 字元“\v”來表示垂直制表符,這裡用它來作為換行符的占位符——當然你也可以

# 用其他未在檔案中使用的字元來代替它。

# 分别壓縮每個.TXT檔案,壓縮後删除原來的檔案并将壓縮後的.ZIP檔案

# 命名為與原來相同的名字(隻是擴充名不同)。(DOS環境:“dir /b”

# 顯示不帶路徑的檔案名)。

DOS 環境再次略過,而且我覺得這裡用 bash 的參數 ${i%.TXT}.zip 替換更帥。

本文轉自 kk5234 51CTO部落格,原文連結:http://blog.51cto.com/kk5234/648621,如需轉載請自行聯系原作者

繼續閱讀