awk簡易教程

導讀

相對于 sed 常常作用于一整行的處理辫诅,awk 則比較傾向于將一行分成數(shù)個“字段”來處理凭戴。
本文翻譯自 simple awk tutorial
習慣了英文者,可自行前往閱讀炕矮。

接下來的例子中會使用到 employee.txt 文件么夫。
$ cat employee.txt 100 Thomas Manager Sales $5,000 200 Jason Developer Technology $5,500 300 Raj Sysadmin Technology $7,000 400 Nisha Manager Marketing $9,500 500 Randy Manager Sales $6,000

awk是做什么的?

最簡單的 awk 用法是基于列的數(shù)據(jù)處理肤视,比如說表格档痪,使用標準輸入將數(shù)據(jù)導入。變量 $1, $2...表示當前輸入行的第一列邢滑,第二列...腐螟。打印出一個文件的第二列,你可能會使用下面的 awk 腳本:

awk < file '{ print $2 }'

這意味著“每一行困后,打印出第二個字段”

例如:
$awk < employee.txt '{ print $2 }' Thomas Jason Raj Nisha Randy

為了打印出第二列和第三列乐纸,可以

awk < file '{ print $2, $3 }'

分隔符

awk 將行分隔為字段,默認會使用空白符(whitespace)來分隔摇予,也就是空格符(spaces)或制表符(tabs)汽绢。 你可以使用 -F 選項來指定其它字符為分隔符。例如侧戴,為了打印出當前系統(tǒng)中所有用戶的主目錄宁昭,你可以

$awk < /etc/passwd -F: '{ print $6 }'

passwd 的文件內(nèi)容以冒號來分隔,主目錄在第六個字段酗宋。

運算

awk是一種弱類型語言积仗;變量既可以是字符串,也可以是數(shù)字本缠,這取決于你怎樣引用它們斥扛。所有的數(shù)字都是浮點型的。所以丹锹,為了實現(xiàn)華氏溫度與攝氏溫度之間的轉(zhuǎn)換稀颁,你可以

awk '{ print ($1-32)*(5/9) }'

標準輸入的華氏溫度會被轉(zhuǎn)換為攝氏溫度,直到遇到 EOF楣黍,該 awk 程序停止匾灶。

可選的操作符與C基本一樣。緊接著的兩個字符串表達式(以空格分隔或沒有空格)租漂,會連接阶女〖彰樱‘+’ 總是加法。

echo 5 4 | awk '{ print $1 + $2 } 會輸出 “9”秃踩,然而
echo 5 4 | awk '{ print $1 $2 }' 會輸出 “54”衬鱼,注意
echo 5 4 | awk '{ print $1, $2 }' 會輸出 “5 4”。

變量

awk 有一些內(nèi)置的憔杨、自動置值的變量鸟赫,比如上文提到的$1。其它的內(nèi)置變量中消别,適合初學者的抛蚤,也就是 $0 和 NF 了,前者表示當前輸入行寻狂,后者表示當前輸入行($0)的字段總數(shù)岁经。$NF表示當前輸入行的最后一個字段。

你可以定義自己的變量蛇券,除了 awk 保留的關(guān)鍵詞缀壤,你可以用任何名字來引用它。變量沒有明確賦值的怀读,字符串為“”诉位,數(shù)字為0。

例如菜枷,下面的代碼會打印出每行數(shù)字的平均值:

awk '{ tot=0; for (i=1; i <= NF; i++) tot += $i; print tot/NF; }'

使用 $i 去取第 i 個變量的值, for 循環(huán)與C語言類似叁丧。 tot 在代碼的開頭作初始化的原因啤誊,是這個代碼運行于每一個輸入行,如若不拥娄,當開始運行第二行的時候蚊锹, tot 將具有第一行結(jié)束時的值。

塊Block

可能稚瘾,你僅有一些特殊字段的數(shù)字需要單獨相加牡昆。為了這樣做,你需要在結(jié)束時打印結(jié)果摊欠。采用的方法為

awk '{ tot += $1; n += 1; } END { print tot/n }'

注意兩個語句塊的使用丢烘。第二個之前有個 END;意味著一旦所有的輸入處理結(jié)果些椒,就運行這個語句塊播瞳。一般,你可以在語句塊之前添加各種條件免糕,僅當條件滿足時語句塊才被執(zhí)行赢乓。也就是忧侧,你可以

awk '$1 == 0 { print $2 }'

僅在第一個字段為0時才打印第二個字段。你還可以使用正則表達式來匹配行數(shù)據(jù):

awk '/^test/' { print $2 }

如果你沒有添加條件牌芋,每行數(shù)據(jù)輸入時都會運行塊語句蚓炬。

語句塊的特殊條件 BEGIN 和 END,分別運行于輸入數(shù)據(jù)的處理之前和處理之后躺屁。

printf

awk 包含了 printf 語句试吁,本質(zhì)上類似于C語言的 printf。當你想要格式化輸出楼咳,或者將多種元素整合到一行熄捍,可以使用它。(print 暗含增加一個'\n'母怜;printf不會)余耽。

比如,移除每一行第一字段

awk '{ for (i=2; i<=NF; i++) printf "%s ", $i; printf "\n"; }'

注意苹熏,使用NF迭代所有的字段碟贾,顯示地使用 printf 輸出 '\n'。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末轨域,一起剝皮案震驚了整個濱河市袱耽,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌干发,老刑警劉巖朱巨,帶你破解...
    沈念sama閱讀 222,590評論 6 517
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異枉长,居然都是意外死亡冀续,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 95,157評論 3 399
  • 文/潘曉璐 我一進店門必峰,熙熙樓的掌柜王于貴愁眉苦臉地迎上來洪唐,“玉大人,你說我怎么就攤上這事吼蚁∑拘瑁” “怎么了?”我有些...
    開封第一講書人閱讀 169,301評論 0 362
  • 文/不壞的土叔 我叫張陵肝匆,是天一觀的道長粒蜈。 經(jīng)常有香客問我,道長术唬,這世上最難降的妖魔是什么薪伏? 我笑而不...
    開封第一講書人閱讀 60,078評論 1 300
  • 正文 為了忘掉前任,我火速辦了婚禮粗仓,結(jié)果婚禮上嫁怀,老公的妹妹穿的比我還像新娘设捐。我一直安慰自己,他們只是感情好塘淑,可當我...
    茶點故事閱讀 69,082評論 6 398
  • 文/花漫 我一把揭開白布萝招。 她就那樣靜靜地躺著,像睡著了一般存捺。 火紅的嫁衣襯著肌膚如雪槐沼。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,682評論 1 312
  • 那天捌治,我揣著相機與錄音岗钩,去河邊找鬼。 笑死肖油,一個胖子當著我的面吹牛兼吓,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播森枪,決...
    沈念sama閱讀 41,155評論 3 422
  • 文/蒼蘭香墨 我猛地睜開眼视搏,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了县袱?” 一聲冷哼從身側(cè)響起输钩,我...
    開封第一講書人閱讀 40,098評論 0 277
  • 序言:老撾萬榮一對情侶失蹤豆混,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后簇秒,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體娶眷,經(jīng)...
    沈念sama閱讀 46,638評論 1 319
  • 正文 獨居荒郊野嶺守林人離奇死亡档址,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,701評論 3 342
  • 正文 我和宋清朗相戀三年年叮,在試婚紗的時候發(fā)現(xiàn)自己被綠了锉试。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 40,852評論 1 353
  • 序言:一個原本活蹦亂跳的男人離奇死亡揍移,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出反肋,到底是詐尸還是另有隱情那伐,我是刑警寧澤,帶...
    沈念sama閱讀 36,520評論 5 351
  • 正文 年R本政府宣布石蔗,位于F島的核電站罕邀,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏养距。R本人自食惡果不足惜诉探,卻給世界環(huán)境...
    茶點故事閱讀 42,181評論 3 335
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望棍厌。 院中可真熱鬧肾胯,春花似錦竖席、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,674評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至艳馒,卻和暖如春憎亚,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背弄慰。 一陣腳步聲響...
    開封第一講書人閱讀 33,788評論 1 274
  • 我被黑心中介騙來泰國打工第美, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人陆爽。 一個月前我還...
    沈念sama閱讀 49,279評論 3 379
  • 正文 我出身青樓什往,卻偏偏與公主長得像,于是被迫代替她去往敵國和親墓陈。 傳聞我的和親對象是個殘疾皇子恶守,可洞房花燭夜當晚...
    茶點故事閱讀 45,851評論 2 361

推薦閱讀更多精彩內(nèi)容

  • awk介紹awk變量printf命令:實現(xiàn)格式化輸出操作符awk patternawk actionawk數(shù)組aw...
    哈嘍別樣閱讀 1,571評論 0 4
  • 轉(zhuǎn)載 原文的排版和內(nèi)容都更加友好,并且詳細,我只是在這里貼出了一部分留作自己以后參考和學習,如希望更詳細了解AWK...
    XKirk閱讀 3,222評論 2 25
  • awk:報告生成器,格式化文本輸出 內(nèi)容: awk介紹 awk基本用法 awk變量 awk格式化 awk操作符 a...
    BossHuang閱讀 1,458評論 0 9
  • awk: grep,sed,awk grep:文本過濾 sed:文本編輯 awk:文本格式化工具贡必; 1 什么是aw...
    木林森閱讀 1,790評論 0 16
  • 本章主要學習內(nèi)容awk介紹 ?awk基本用法 ?awk變量 ?awk格式化 ?awk操作符 ?awk條件判斷 ?a...
    楠人幫閱讀 1,273評論 0 8