awk 常用功能

awk 用法：awk ' pattern {action} '  

變量名 含義

ARGC 指令行變元個數

ARGV 指令行變元數組

FILENAME 目前輸入檔案名

FNR 目前檔案中的記錄号

FS 輸入域分隔符，預設為一個空格

RS 輸入記錄分隔符

NF 目前記錄裡域個數

NR 到目前為止記錄數

OFS 輸出域分隔符

ORS 輸出記錄分隔符

1、awk '/101/'  file  #顯示檔案file中包含101的比對行。

  awk '/101/,/105/' file  #

  awk '$1 == 5'  file  #顯示$2等于5行!

  awk '$1 == "CT"'  file   #注意比較必須帶雙引号!

  awk '$1 * $2 >100 '  file  #顯示$1乘以$2大于100的行!(awk還可以進行運算!)

  awk '$2 >5 && $2<=15'  file  #顯示5<$2<=15的行,與(&&)或(||)也能在awk指令中使用!

2、awk '{ print NR,NF,$1,$NF }' file  #顯示檔案file的目前記錄号(行号)、域數和每一行的第一個和最後一個域。

  awk '/101/ { print $1,$2 + 10 }' file  #顯示檔案file的比對行的第一域和第二個域加10。

  awk '/101/ { print $1,$2 }'  file  #顯示$1和$2兩個域,$1$2之間有逗号(,)顯示的時候$1和$2之間有一個空格!

  awk '/101/ { print $1 $2 }' file  #顯示檔案file的比對行的第一、二個域，沒有逗号$1和$2之間沒有空格!

3、df | awk '$4 > 1000000 '         #通過管道符獲得輸入，如：顯示第4個域滿足條件的行。

4、awk -F "|" '{ print $1 }'   file  #按照新的分隔符“|”進行操作,預設的分隔符是空白字元!

  awk  'BEGIN { FS="[:\t|]" } { print $1,$2,$3 }'   file  #同時用 : \t(tab鍵) | 三個做為分隔符!

  Sep="|"

  awk -F $Sep '{ print $1 }'  file  #按照環境變量Sep的值做為分隔符。    

  awk -F '[ :\t|]' '{ print $1 }' file  #按照正規表達式的值做為分隔符，這裡代表 空格、:、TAB(\t)、|同時做為分隔符。

  awk -F '[][]'    '{ print $1 }' file  #按照正規表達式的值做為分隔符，這裡代表[、]

5、awk -f awkfile  file  #通過檔案awkfile的内容依次進行控制。

cat awkfile

/101/{print "\047 Hello! \047"} --遇到比對行以後列印 ' Hello! '.\047代表單引号。

{print $1,$2}                   --因為沒有模式控制，列印每一行的前兩個域。

6、awk '$1 ~ /101/ { print $1 }' file  #顯示檔案中第一個域比對101的行（記錄）。

7、awk   'BEGIN { OFS="%" } { print $1,$2 }'    file 通過設定輸出分隔符（OFS="%"）修改輸出格式。

8、awk   'BEGIN { max=100 ;print "max=" max }             BEGIN 表示在處理任意行之前進行的操作。

  {max=($1 >max?$1:max); print $1,"Now max is "max}'  file   #取得檔案第一個域的最大值。

  （表達式1?表達式2:表達式3 相當于：

  if (表達式1)

      表達式2

  else

      表達式3

    awk 'BEGIN { max=100;print "max="max } {max=($1>max?$1:max);print $1, "now max is " max }' abc.txt

   awk的運算符号 加+減- 乘*除/ 取餘%  

9、awk '$1 * $2 >100 { print $1 }' file 顯示檔案中第一個域比對101的行（記錄）。

10、awk '{ $1 == 'Chi' {$3 = 'China'; print }' file 找到比對行後先将第3個域替換後再顯示該行（記錄）。

   awk '{ $7 %= 3; print $7 }'  file 将第7域被3除，并将餘數賦給第7域再列印。

11、awk '/tom/ { wage=$2+$3; printf wage }' file 找到比對行後為變量wage指派并列印該變量。

12、awk '/tom/ { count++; }  

        END { print "tom was found "count" times" }' file END表示在所有輸入行處理完後進行處理。

13、awk 'gsub(/\$/,"");gsub(/,/,""); cost+=$4;

        END { print "The total is $" cost>"filename" }'  file  #gsub函數用空串替換$和,再将結果輸出到filename中。

   1 2 3 $1,200.00

   1 2 3 $2,300.00

   1 2 3 $4,000.00

   awk '{ gsub(/\$/,"");gsub(/,/,"");

   if ($4>1000&&$4<2000) c1+=$4;

   else if ($4>2000&&$4<3000) c2+=$4;

   else if ($4>3000&&$4<4000) c3+=$4;

   else c4+=$4; }

   END { printf  "c1=[%d];c2=[%d];c3=[%d];c4=[%d]\n",c1,c2,c3,c4 }"' file

   通過if和else if完成條件語句

   if ($4>3000&&$4<4000) exit;

   通過exit在某條件時退出，但是仍執行END操作。

   if ($4>3000) next;

   END { printf  "c4=[%d]\n",c4 }"' file

   通過next在某條件時跳過該行，對下一行執行操作。

14、awk '{ print FILENAME,$0 }' awk.test awk.test2 >awk.all  #把awk.test、awk.test2 的檔案内容全部寫到awk.all中，

   awk.test 18 24 224

   awk.test 12 23 214

   awk.test2 12 23 524

   awk.test2 14 21 214

15、awk ' $1!=previous { close(previous); previous=$1 }    

   { print substr($0,index($0," ") +1)>$1 }' fileall 把合并後的檔案重新分拆為3個檔案。并與原檔案一緻。

16、awk 'BEGIN { "df"|getline d; print d }'         通過管道把df的執行結果送給getline，并賦給變量d，然後列印。

getline隻得到df指令執行結果的第一行,是以print d 隻顯示df輸出内容的第一行,如要都顯示需用while循環

awk 'BEGIN{ while("df" | getline  var) print var }'  #getline一行一行得到df指令的結果并指派給var,然後列印.

17、awk 'BEGIN { system("echo \"Input your name:\\c\""); getline d;print "\nYour name is",d,"\b!\n" }'

   通過getline指令互動輸入name，并顯示出來。

   awk 'BEGIN { FS=":"; while(getline< "/etc/passwd" >0) { if($1~"050[0-9]_") print $1 } }'

   列印/etc/passwd檔案中使用者名包含050x_的使用者名。

18、awk '{ i=1;while(i<NF) {print NF,$i;i++ } }' file 通過while語句實作循環。

   awk '{ for(i=1;i<NF;i++) {print NF,$i } }'   file 通過for語句實作循環。    

   type file|awk -F "/" '

   { for(i=1;i<NF;i++)

   { if(i==NF-1) { printf "%s",$i }

   else { printf "%s/",$i } } }'               顯示一個檔案的全路徑。

   用for和if顯示日期

   awk  'BEGIN {

for(j=1;j<=12;j++)

{ flag=0;

 printf "\n%d月份\n",j;

       for(i=1;i<=31;i++)

       {

       if (j==2&&i>28) flag=1;

       if ((j==4||j==6||j==9||j==11)&&i>30) flag=1;

       if (flag==0) { printf "%02d%02d ",j,i }

       }

}

}'

19、在awk中調用系統變量必須用單引号，如果是雙引号，則表示字元串

Flag=abcd

awk '{ print '$Flag' }'   結果為abcd

awk '{ print  "$Flag" }'   結果為$Flag

以上轉自chinaunix，以下是自己的總結：

求和：

   $awk 'BEGIN{ total=0 }{ total+=$4 }END { print total }' a.txt   -----對a.txt檔案的第四個域進行求和！

• $ awk '/^(no|so)/' test-----列印所有以模式no或so開頭的行。
• $ awk '/^[ns]/{ print $1 }' test-----如果記錄以n或s開頭，就列印這個記錄。
• $ awk '$1 ~/[0-9][0-9]$/{ print $1 }' test-----如果第一個域以兩個數字結束就列印這個記錄。
• $ awk '$1 == 100 || $2 < 50' test-----如果第一個或等于100或者第二個域小于50，則列印該行。
• $ awk '$1 != 10' test-----如果第一個域不等于10就列印該行。
• $ awk '/test/{ print $1 + 10 }' test-----如果記錄包含正規表達式test，則第一個域加10并列印出來。
• $ awk '{ print ($1 > 5 ? "ok "$1: "error"$1) }' test-----如果第一個域大于5則列印問号後面的表達式值，否則列印冒号後面的表達式值。