日志處理cat串稀、awk除抛、sort、uniq母截、head多命令使用

需求:根據(jù)文件內(nèi)容到忽,取出現(xiàn)次數(shù)最多的前兩位ip
基本文件內(nèi)容查看:

$cat test.txt 
210.242.125.35 adwords.google.com
212.188.10.167 www.google.com
193.192.250.158 images-pos-opensocial.googleusercontent.com
193.192.250.158 clients4.google.com
222.255.120.42 google.com
222.255.120.42 apis.google.com
193.192.250.158 clients2.google.com
193.192.250.158 clients3.google.com
64.233.181.49 mts0.google.com
64.233.181.49 maps.gstatic.com

僅輸出ip:

$cat test.txt|awk '{print $1}'
210.242.125.35
212.188.10.167
193.192.250.158
193.192.250.158
222.255.120.42
222.255.120.42
193.192.250.158
193.192.250.158
64.233.181.49
64.233.181.49

按字符串規(guī)則排序:

$cat test.txt|awk '{print $1}'|sort
193.192.250.158
193.192.250.158
193.192.250.158
193.192.250.158
210.242.125.35
212.188.10.167
222.255.120.42
222.255.120.42
64.233.181.49
64.233.181.49

去重計數(shù):

$cat test.txt|awk '{print $1}'|sort|uniq -c
      4 193.192.250.158
      1 210.242.125.35
      1 212.188.10.167
      2 222.255.120.42
      2 64.233.181.49

按首列數(shù)字倒敘排列輸出:
sort -n表示計數(shù)從小到大輸出 sort -r表示倒序輸出

$cat test.txt|awk '{print $1}'|sort|uniq -c|sort -nr
      4 193.192.250.158
      2 64.233.181.49
      2 222.255.120.42
      1 212.188.10.167
      1 210.242.125.35

取對應行數(shù):

$cat test.txt|awk '{print $1}'|sort|uniq -c|sort -nr|head -n 2
      4 193.192.250.158
      2 64.233.181.49

第二種去重計數(shù)方式:
采用awk數(shù)組的形式計數(shù),然后排序輸出內(nèi)容

$cat test.txt|awk '{a[$1]++}END{for(i in a) print a[i],i}'|sort -nr|head -n 2
4 193.192.250.158
2 64.233.181.49
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末清寇,一起剝皮案震驚了整個濱河市喘漏,隨后出現(xiàn)的幾起案子护蝶,更是在濱河造成了極大的恐慌,老刑警劉巖翩迈,帶你破解...
    沈念sama閱讀 217,826評論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件持灰,死亡現(xiàn)場離奇詭異,居然都是意外死亡负饲,警方通過查閱死者的電腦和手機堤魁,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,968評論 3 395
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來绽族,“玉大人姨涡,你說我怎么就攤上這事衩藤“陕” “怎么了?”我有些...
    開封第一講書人閱讀 164,234評論 0 354
  • 文/不壞的土叔 我叫張陵赏表,是天一觀的道長检诗。 經(jīng)常有香客問我,道長瓢剿,這世上最難降的妖魔是什么逢慌? 我笑而不...
    開封第一講書人閱讀 58,562評論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮间狂,結(jié)果婚禮上攻泼,老公的妹妹穿的比我還像新娘。我一直安慰自己鉴象,他們只是感情好忙菠,可當我...
    茶點故事閱讀 67,611評論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著纺弊,像睡著了一般牛欢。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上淆游,一...
    開封第一講書人閱讀 51,482評論 1 302
  • 那天傍睹,我揣著相機與錄音,去河邊找鬼犹菱。 笑死拾稳,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的腊脱。 我是一名探鬼主播访得,決...
    沈念sama閱讀 40,271評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼虑椎!你這毒婦竟也來了震鹉?” 一聲冷哼從身側(cè)響起俱笛,我...
    開封第一講書人閱讀 39,166評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎传趾,沒想到半個月后迎膜,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,608評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡浆兰,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,814評論 3 336
  • 正文 我和宋清朗相戀三年磕仅,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片簸呈。...
    茶點故事閱讀 39,926評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡榕订,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出蜕便,到底是詐尸還是另有隱情劫恒,我是刑警寧澤,帶...
    沈念sama閱讀 35,644評論 5 346
  • 正文 年R本政府宣布轿腺,位于F島的核電站两嘴,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏族壳。R本人自食惡果不足惜憔辫,卻給世界環(huán)境...
    茶點故事閱讀 41,249評論 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望仿荆。 院中可真熱鬧贰您,春花似錦、人聲如沸拢操。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,866評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽庐冯。三九已至孽亲,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間展父,已是汗流浹背返劲。 一陣腳步聲響...
    開封第一講書人閱讀 32,991評論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留栖茉,地道東北人篮绿。 一個月前我還...
    沈念sama閱讀 48,063評論 3 370
  • 正文 我出身青樓,卻偏偏與公主長得像吕漂,于是被迫代替她去往敵國和親亲配。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 44,871評論 2 354

推薦閱讀更多精彩內(nèi)容