Linux 文本處理利器--Awk常用命令

簡(jiǎn)介：

在 Linux/UNIX 系統(tǒng)中，awk 是一個(gè)功能強(qiáng)大的編輯工具，逐行讀取輸入文本，并根據(jù)指定的匹配模式進(jìn)行查找，對(duì)符合條件的內(nèi)容進(jìn)行格式化輸出或者過(guò)濾處理，可以在無(wú)交互的情況下實(shí)現(xiàn)相當(dāng)復(fù)雜的文本操作，被廣泛應(yīng)用于 Shell 腳本，完成各種自動(dòng)化配置任務(wù)。

工作原理

逐行讀取文本,默認(rèn)以空格為分隔符進(jìn)行分隔,將分隔所得的各個(gè)字段保存到內(nèi)建變量中,并按模式或者條件執(zhí)行編輯命令

常見(jiàn)用法：

單引號(hào)加上大括號(hào)“{}”用于設(shè)置對(duì)數(shù)據(jù)進(jìn)行的處理動(dòng)作。awk 可以直接處理目標(biāo)文件，也可以通過(guò)“-f”讀取腳本對(duì)目標(biāo)文件進(jìn)行處理。
awk 將文本文件中的一行視為一個(gè)記錄，而將一行中的某一部分（列）作為記錄中的一個(gè)字（域）。為了操作這些不同的字段，awk 借用 shell 中類似于位置變量的方法， 用$1、$2、$3…順序地表示行（記錄）中的不同字段。另外 awk 用$0 表示整個(gè)行（記錄）。不同的字段之間是通過(guò)指定的字符分隔。awk 默認(rèn)的分隔符是空格。awk 允許在命令行中用“-F 分隔符”的形式來(lái)指定分隔符。

命令格式

awk [選項(xiàng)] '模式或條件 {編輯指令}' 文件1 文件2
awk -f 腳本文件 文件1 文件2

特殊的內(nèi)建變量

FS：指定每行文本的字段分隔符，默認(rèn)為空格或制表位（tab鍵）；
NF：當(dāng)前處理的行的字段個(gè)數(shù)；
NR：當(dāng)前處理的行的行號(hào)（序數(shù)）；
$0：當(dāng)前處理的行的整行內(nèi)容；
$n：當(dāng)前處理行的第 n 個(gè)字段（第 n 列）；
FILENAME：被處理的文件名；
RS：數(shù)據(jù)記錄分隔，默認(rèn)為\n，即每行為一條記錄；

關(guān)系運(yùn)算符號(hào)：

只有當(dāng)條件為真，才執(zhí)行指定的動(dòng)作。
大于（>）；小于（<）；大于等于（>=）；小于等于（<=）；
等于（==）、不等于（！=）；
&&（與）、||（或）、!（非）；
加（+）、減（-）、乘（*）、除（/）、取余（%）、乘方（^）；

示例如下：

打印文本內(nèi)容

awk '{print $1"---"$2}' aa.txt #在第一和第二字段之間插入--符號(hào)

awk '{print$0}' aa.txt #輸出所有行內(nèi)容

awk '/^6/{print}' aa.txt #輸出以6開(kāi)頭的行

awk '/^(6|8)/{print}' aa.txt # #輸出以6或8開(kāi)頭的行

awk '/^(6)/ && $3 > 70 {print}' aa.txt #輸出以6開(kāi)頭和第三字段大于70的行

awk '/^(6)/ && $3 == 55 {print}' aa.txt #輸出以6開(kāi)頭和第三字段等于60的行

awk 'NR==1,NR==3{print}' aa.txt #輸出第1至第3行內(nèi)容
等于awk '(NR>=1)&&(NR<=3){print}' aa.txt

awk 'NR==1;NR==3{print}' aa.txt #輸出第1行、第3行內(nèi)容
等于awk 'NR==1 || NR==3{print}' aa.txt

awk '/^root/{print}' /etc/passwd #輸出以root開(kāi)頭的行

按字段輸出文本

awk '{print $1}' aa.txt #輸出第1字段內(nèi)容

awk '{print$1,$3}' aa.txt #輸出每行中的第1、3字段

awk -F ' ' '{print $2}' aa.txt #以空格分割，輸出第二字段