一、什么是awk

awk是Linux下的一個命令，他對其他命令的輸出，對文件的處理都十分強(qiáng)大，其實他更像一門編程語言，他可以自定義變量，有條件語句，有循環(huán)，有數(shù)組，有正則，有函數(shù)等。他讀取輸出，或者文件的方式是一行，一行的讀，根據(jù)你給出的條件進(jìn)行查找，并在找出來的行中進(jìn)行操作，感覺他的設(shè)計思想，真的很簡單，但是結(jié)合實際情況，具體操作起來就沒有那么簡單了。他有三種形勢，awk，gawk，nawk，平時所說的awk其實就是gawk。

二、awk命令格式和選項

·2.1 語法形式

awk [options] 'script' var=value file(s)
awk [options] -f scriptfile var=value file(s)

·盡管操作可能會很復(fù)雜，但語法總是這樣，其中 pattern 表示 awk在數(shù)據(jù)中查找的內(nèi)容，而 action是在找到匹配內(nèi)容時所執(zhí)行的一系列命令。花括號（{}）不需要在程序中始終出現(xiàn)，但它們用于根據(jù)特定的模式對一系列指令進(jìn)行分組。 pattern就是要表示的正則表達(dá)式，用斜杠括起來。

·awk語言的最基本功能是在文件或者字符串中基于指定規(guī)則瀏覽和抽取信息，awk抽取信息后，才能進(jìn)行其他文本操作。完整的awk腳本通常用來格式化文本文件中的信息。

·通常，awk是以文件的一行為處理單位的。awk每接收文件的一行，然后執(zhí)行相應(yīng)的命令，來處理文本。

·2.2 命令選項

-F fs or --field-separator fs
指定輸入文件折分隔符，fs是一個字符串或者是一個正則表達(dá)式，如-F:。

-v var=value or --asign var=value
賦值一個用戶定義變量。

-f scripfile or --file scriptfile
從腳本文件中讀取awk命令。

-mf nnn and -mr nnn
對nnn值設(shè)置內(nèi)在限制，-mf選項限制分配給nnn的最大塊數(shù)目；
-mr選項限制記錄的最大數(shù)目。這兩個功能是Bell實驗室版awk的擴(kuò)展功能，在標(biāo)準(zhǔn)awk中不適用。

-W compact or --compat, -W traditional or --traditional
在兼容模式下運行awk。所以gawk的行為和標(biāo)準(zhǔn)的awk完全一樣，所有的awk擴(kuò)展都被忽略。

-W copyleft or --copyleft, -W copyright or --copyright
打印簡短的版權(quán)信息。

-W help or --help, -W usage or --usage
打印全部awk選項和每個選項的簡短說明。

-W lint or --lint
打印不能向傳統(tǒng)unix平臺移植的結(jié)構(gòu)的警告。

-W lint-old or --lint-old
打印關(guān)于不能向傳統(tǒng)unix平臺移植的結(jié)構(gòu)的警告。

-W posix
打開兼容模式。但有以下限制，不識別：\x、函數(shù)關(guān)鍵字、func、換碼序列以及當(dāng)fs是一個空格時，將新行作為一個域分隔符；操作符**和**=不能代替^和^=；fflush無效。

-W re-interval or --re-inerval
允許間隔正則表達(dá)式的使用，參考(grep中的Posix字符類)，如括號表達(dá)式[[:alpha:]]。

-W source program-text or --source program-text
使用program-text作為源代碼，可與-f命令混用。

-W version or --version
打印bug報告信息的版本。

三、awk的正則

四、awk的函數(shù)

·4.1 字符串函數(shù)

·4.2 數(shù)學(xué)函數(shù)

五、入門實例

·假設(shè)last -n 5的輸出如下

[root@www ~]# last -n 5 <==僅取出前五行
root     pts/1   192.168.1.100  Tue Feb 10 11:21   still logged in
root     pts/1   192.168.1.100  Tue Feb 10 00:46 - 02:28  (01:41)
root     pts/1   192.168.1.100  Mon Feb  9 11:41 - 18:30  (06:48)
dmtsai   pts/1   192.168.1.100  Mon Feb  9 11:41 - 11:41  (00:00)
root     tty1                   Fri Sep  5 14:09 - 14:10  (00:01)

·如果只是顯示最近登錄的5個帳號

#last -n 5 | awk  '{print $1}'
root
root
root
dmtsai
root

·awk工作流程是這樣的：讀入有'\n'換行符分割的一條記錄，然后將記錄按指定的域分隔符劃分域，填充域，$0則表示所有域,$1表示第一個域,$n表示第n個域。默認(rèn)域分隔符是"空白鍵" 或[tab]鍵,所以$1表示登錄用戶，$3表示登錄用戶ip,以此類推。

·如果只是顯示/etc/passwd的賬戶

#cat /etc/passwd |awk  -F ':'  '{print $1}'  
root
daemon
bin
sys

·這種是awk+action的示例，每行都會執(zhí)行action{print $1}。

-F指定域分隔符為':'。

·如果只是顯示/etc/passwd的賬戶和賬戶對應(yīng)的shell,而賬戶與shell之間以tab鍵分割

#cat /etc/passwd |awk  -F ':'  '{print $1"\t"$7}'
root    /bin/bash
daemon  /bin/sh
bin     /bin/sh
sys     /bin/sh

·如果只是顯示/etc/passwd的賬戶和賬戶對應(yīng)的shell,而賬戶與shell之間以逗號分割,而且在所有行添加列名name,shell,在最后一行添加"blue,/bin/nosh"。

cat /etc/passwd |awk  -F ':'  'BEGIN {print "name,shell"}  {print $1","$7} END {print "blue,/bin/nosh"}'
name,shell
root,/bin/bash
daemon,/bin/sh
bin,/bin/sh
sys,/bin/sh
....
blue,/bin/nosh

·awk工作流程是這樣的：先執(zhí)行BEGING，然后讀取文件，讀入有/n換行符分割的一條記錄，然后將記錄按指定的域分隔符劃分域，填充域，$0則表示所有域,$1表示第一個域,$n表示第n個域,隨后開始執(zhí)行模式所對應(yīng)的動作action。接著開始讀入第二條記錄······直到所有的記錄都讀完，最后執(zhí)行END操作。

·搜索/etc/passwd有root關(guān)鍵字的所有行

#awk -F: '/root/' /etc/passwd
root:x:0:0:root:/root:/bin/bash

·這種是pattern的使用示例，匹配了pattern(這里是root)的行才會執(zhí)行action(沒有指定action，默認(rèn)輸出每行的內(nèi)容)。

·搜索支持正則，例如找root開頭的: awk -F: '/^root/' /etc/passwd

·搜索/etc/passwd有root關(guān)鍵字的所有行，并顯示對應(yīng)的shell

# awk -F: '/root/{print $7}' /etc/passwd             
/bin/bash

這里指定了action{print $7}

參考文獻(xiàn)：

http://man.lupaworld.com/content/manage/ringkee/awk.htm
http://www.cnblogs.com/ggjucheng/archive/2013/01/13/2858470.html
http://www.codeweblog.com/awk命令-awk編程語言詳細(xì)介紹和實例/