gawk程序是Unix中原始awk程序的GNU版本。gawk程序讓流編輯器邁上了一個(gè)新的臺(tái)階，它提供了一種編程語言而不只是編輯器命令。在gawk編程語言中，可以完成下面的事情：
（1）定義變量來保存數(shù)據(jù)；
（2）使用算數(shù)和字符串操作符來處理數(shù)據(jù)；
（3）使用結(jié)構(gòu)化編程概念（比如if-then語句和循環(huán)）來為數(shù)據(jù)處理增加處理邏輯；
（4）通過提取數(shù)據(jù)文件中的數(shù)據(jù)元素，將其重新排列或格式化，生成格式化報(bào)表；
gawk程序的報(bào)告生成能力通常用來從大文本文件中提取數(shù)據(jù)元素，并將它們格式化成可讀的報(bào)告。其中完美的例子是格式化日志文件。在日志文件中找出錯(cuò)誤行會(huì)很難，gawk程序可以讓你從日志文件中過濾出需要的數(shù)據(jù)元素，然后你可以將其格式化，使得重要的數(shù)據(jù)易于閱讀。

1 gawk命令格式

gawk option program file
選項(xiàng)：描述
-F fs指定行中劃分?jǐn)?shù)據(jù)字段的字段分隔符
-f file從指定的文件中讀取程序
-v var=value定義gawk程序中的一個(gè)變量及其默認(rèn)值
-mf N指定要處理的數(shù)據(jù)文件中的最大字段數(shù)
-mr N指定數(shù)據(jù)文件中的最大數(shù)據(jù)行數(shù)
-W  keyword指定gawk的兼容模式或警告等級(jí)

命令行選項(xiàng)提供了一個(gè)簡(jiǎn)單的途徑來定制gawk程序中的功能。
gawk的強(qiáng)大之處在于程序腳本，可以寫腳本來讀取文本行的數(shù)據(jù)，然后處理并顯示數(shù)據(jù)，創(chuàng)建任何類型的輸出報(bào)告。

2 從命令行讀取程序腳本

（1）gawk程序及腳本用一對(duì)花括號(hào)來定義。你必須將命令放到兩個(gè)花括號(hào)“{}”中。如果你錯(cuò)誤的使用了圓括號(hào)來包含gawk腳本，就會(huì)出錯(cuò)。
（2）由于gawk命令行假定腳本是單個(gè)文本字符串，你還必須將腳本放到單引號(hào)中。
例如：

        [root@centos7 ~]# gawk '{print "Hello World!"}'

運(yùn)行這個(gè)命令，你可能會(huì)有些失望，因?yàn)槭裁炊疾粫?huì)發(fā)生。原因在于沒有在命令行上指定文件名，所有g(shù)awk程序會(huì)從STDIN接受數(shù)據(jù)。在運(yùn)行這個(gè)程序時(shí)，它會(huì)一直等待從STDIN輸入的文本。
如果你輸入一行文本并按下回車鍵，gawk會(huì)對(duì)這行文本運(yùn)行一遍程序腳本。跟sed編輯器一樣，gawk程序會(huì)針對(duì)數(shù)據(jù)流中的每一行文本執(zhí)行程序。由于程序腳本被設(shè)為顯示一行固定的文本字符串，因此不管你在數(shù)據(jù)流中輸入什么文本，都會(huì)得到同樣的文本輸出。

[root@centos7 ~]# gawk '{print "Hello World!"}'
Thie is a error test
Hello World!
Hello World!
Hello World!

要終止這個(gè)程序，你必須標(biāo)明數(shù)據(jù)流已經(jīng)結(jié)束了。bash shell提供了一個(gè)組合鍵倆生成EOF（End –of-File）字符。Ctrl + D 組合鍵會(huì)字bash中產(chǎn)生一個(gè)EOF字符。這個(gè)組合鍵能夠終止該gawk程序并返回到命令行界面提示符下。

3 使用數(shù)據(jù)字段變量

gawk的主要特征之一是其處理文本文件中數(shù)據(jù)的能力。它會(huì)自動(dòng)給一行的每個(gè)數(shù)據(jù)元素分配一個(gè)變量。默認(rèn)情況下，gawk會(huì)將如下變量分配給它在文本中發(fā)現(xiàn)的數(shù)據(jù)字段：

$0代表整個(gè)文本行
$1代表文本行的第一個(gè)數(shù)據(jù)段
$n代表文本行的第n個(gè)數(shù)據(jù)段

在文本行中，每個(gè)數(shù)據(jù)段都是通過字段分隔符劃分的。gawk在讀取一行文本時(shí)，會(huì)用預(yù)定義的字段分隔符劃分每個(gè)字段。gawk中默認(rèn)的字段分隔符是任意的空白字符（例如空格或者制表符）。
例如，用-F指定字段分隔符。顯示系統(tǒng)密碼文件的第一個(gè)數(shù)據(jù)字段。由于/etc/passwd用冒號(hào)來分隔數(shù)據(jù)字段，因而可以將冒號(hào)指定為字段分隔符。

[root@centos7 ~]# gawk -F : '{print $1}' /etc/passwd
root
bin
daemon
adm
lp
sync
shutdown
halt
mail
operator
[……]

4 在程序腳本中使用多個(gè)命令

gawk編程語言允許將多條命令組合成一個(gè)正常程序。要在命令行上的程序腳本中使用多條命令，只要在命令之間放個(gè)分號(hào)即可。
例如

[root@centos7 ~]# echo "My name is centos"|gawk '{$4="hahaha";print $0}'
My name is hahaha

第一條命令會(huì)給$4賦值。第二條命令會(huì)打印整個(gè)數(shù)據(jù)字段。注意，gawk程序在輸出中已經(jīng)將原文本中的第四個(gè)數(shù)據(jù)字段替換了新值。

5 從文本中讀取程序

跟sed編輯器一樣，gawk編輯器允許將程序存儲(chǔ)到文件中，然后再在命令行中引用。

[root@centos7 ~]# cat script2.gawk 
{print $1 "'s' home directory is " $6}
[root@centos7 ~]# gawk -F: -f script2.gawk  /etc/passwd
root's' home directory is /root
bin's' home directory is /bin
daemon's' home directory is /sbin
adm's' home directory is /var/adm
lp's' home directory is /var/spool/lpd
sync's' home directory is /sbin
shutdown's' home directory is /sbin
halt's' home directory is /sbin
mail's' home directory is /var/spool/mail
[……]

script2.gawk程序腳本會(huì)再次使用print命令打印/etc/passwd文件中的主目錄數(shù)據(jù)字段（字段變量$6），以及userID數(shù)據(jù)字段（字段變量$1）。
可以在程序文件中指定多條命令。要這么做的話，只有一天命令放一行即可，不需要使用分號(hào)。

[root@centos7 ~]# cat script3.gawk 
{
text = "'s home directory is "
print $1 text $6
}

[root@centos7 ~]# gawk -F: -f script3.gawk /etc/passwd
root's home directory is /root
bin's home directory is /bin
daemon's home directory is /sbin
adm's home directory is /var/adm
lp's home directory is /var/spool/lpd
sync's home directory is /sbin
shutdown's home directory is /sbin
[……]

script3.gawk程序腳本定義了一個(gè)變量來保存print命令中用到的文本字符串。
注意：gawk程序在引用變量值時(shí)并未像shell腳本一樣使用美元符。

6 在處理數(shù)據(jù)前運(yùn)行腳本

gawk還允許指定程序腳本何時(shí)運(yùn)行。默認(rèn)情況下，gawk會(huì)從輸入中讀取一行文本，然后針對(duì)該行的數(shù)據(jù)執(zhí)行程序腳本。有時(shí)可能會(huì)需要在處理數(shù)據(jù)前運(yùn)行腳本，比如報(bào)告創(chuàng)建標(biāo)題。BEGIN關(guān)鍵字就是用來做這個(gè)的。它會(huì)強(qiáng)制gawk在讀取數(shù)據(jù)前執(zhí)行BEGIN關(guān)鍵字后指定的程序腳本。

[root@centos7 ~]# cat data3.txt 
Line 1
Line 2
Line 3
[root@centos7 ~]# gawk 'BEGIN{print "The data3 File contents:"}{print $0}' data3.txt The data3 File contents:
Line 1
Line 2
Line 3

在gawk執(zhí)行了BEGIN腳本后，它會(huì)用第二段腳本來處理文件數(shù)據(jù)。這么做是要小心，兩段腳本仍然被認(rèn)為是gawk命令行中的一個(gè)文本字符串。你需要相應(yīng)的加上單引號(hào)。

7 在處理數(shù)據(jù)后運(yùn)行腳本

與BEGIN關(guān)鍵字類似，END關(guān)鍵字允許你指定一個(gè)程序腳本，gawk會(huì)在讀完數(shù)據(jù)后執(zhí)行它。

[root@centos7 ~]# gawk '{print $0} END{print "End of file"}' data3.txt 
Line 1
Line 2
Line 3
End of file

當(dāng)gawk程序打印完文件內(nèi)容后，會(huì)執(zhí)行END腳本中的命令。這是在處理完所有正常數(shù)據(jù)后給報(bào)告添加頁腳的最佳方法。

鏈接：https://www.cnblogs.com/Sunzz/p/7232058.html