Groovy應(yīng)用(1) - 使用Groovy解析日志

其中合法的,需要處理的日志行的基本模版如下:

INFO   [11:30:09.356] [dw-23 - GET ....../name_cid_check/%E6%9D%8E%E6%9E%97%E5%B3%B0/XXXX] api service v1 -  access:G1;數(shù)據(jù)源名稱;127.0.0.1;****|XXXX;{"data":{"desc":"一致","status":"1","cid":"XXXX","name":"****"},"msg":"success","code":0}

結(jié)構(gòu)為:
INFO [---][dw-兩位數(shù)字 GET restfull url] api service v1 - access:G1;數(shù)據(jù)源名稱该窗;訪問ip瓢棒;被查詢姓名|被查詢身份證號;json格式返回結(jié)果

  • 首先完成文件的讀寫

def readLine(fileName) {
    new File(fileName).eachLine {
        line ->checkNeed "${line}"
    }
} 
def checkNeed(lineStr){
    println lineStr
}
  • 完成文件遍歷,調(diào)用文件讀取

def main() {
    def days = [/2016-05-13/, /2016-05-14/, /2016-05-15/, /2016-05-16/, /2016-05-17/, /2016-05-18/,/2016-05-19/, /2016-05-20/, /2016-05-21/, /2016-05-27/, /2016-06-01/, /2016-06-07/,/2016-06-09/, /2016-06-12/, /2016-06-13/, /2016-06-14/]
    //遍歷數(shù)組的方式: 數(shù)組.each{成員變量 ->處理語句}
    days.each { perday ->
            readLine("I:\\待處理\\2016-06-14日志處理\\application-" + perday + "-0.log", perday);    
          }
}

  • 匹配大括號和獲取IP的正則表達式


def 匹配大括號(txt) {
    def matcher = txt =~ /\[(.*?)\]/
  //可以加入任何需要過濾的特殊字符(注意有的需要轉(zhuǎn)義)
    def result=[]; 
   while (matcher.find()) {
        result.add( matcher.group(1));    
}    
return result;
}


def getIp(txt){
    def matcher = txt =~/(\d+\.\d+\.\d+\.\d+)/;
    def result=[];
    while (matcher.find()) {
        result.add( matcher.group(0));
    } 
   return result;
}

  • 開發(fā)完畢后,生成一個字符串,另存為csv雷袋,然后用excel處理一下即可

Paste_Image.png
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市辞居,隨后出現(xiàn)的幾起案子楷怒,更是在濱河造成了極大的恐慌,老刑警劉巖瓦灶,帶你破解...
    沈念sama閱讀 222,378評論 6 516
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件鸠删,死亡現(xiàn)場離奇詭異,居然都是意外死亡贼陶,警方通過查閱死者的電腦和手機刃泡,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,970評論 3 399
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來碉怔,“玉大人烘贴,你說我怎么就攤上這事〈殡剩” “怎么了桨踪?”我有些...
    開封第一講書人閱讀 168,983評論 0 362
  • 文/不壞的土叔 我叫張陵,是天一觀的道長芹啥。 經(jīng)常有香客問我锻离,道長铺峭,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 59,938評論 1 299
  • 正文 為了忘掉前任纳账,我火速辦了婚禮逛薇,結(jié)果婚禮上捺疼,老公的妹妹穿的比我還像新娘疏虫。我一直安慰自己,他們只是感情好啤呼,可當(dāng)我...
    茶點故事閱讀 68,955評論 6 398
  • 文/花漫 我一把揭開白布卧秘。 她就那樣靜靜地躺著,像睡著了一般官扣。 火紅的嫁衣襯著肌膚如雪翅敌。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,549評論 1 312
  • 那天惕蹄,我揣著相機與錄音蚯涮,去河邊找鬼。 笑死卖陵,一個胖子當(dāng)著我的面吹牛遭顶,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播泪蔫,決...
    沈念sama閱讀 41,063評論 3 422
  • 文/蒼蘭香墨 我猛地睜開眼棒旗,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了撩荣?” 一聲冷哼從身側(cè)響起铣揉,我...
    開封第一講書人閱讀 39,991評論 0 277
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎餐曹,沒想到半個月后逛拱,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 46,522評論 1 319
  • 正文 獨居荒郊野嶺守林人離奇死亡台猴,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,604評論 3 342
  • 正文 我和宋清朗相戀三年朽合,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片卿吐。...
    茶點故事閱讀 40,742評論 1 353
  • 序言:一個原本活蹦亂跳的男人離奇死亡旁舰,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出嗡官,到底是詐尸還是另有隱情箭窜,我是刑警寧澤,帶...
    沈念sama閱讀 36,413評論 5 351
  • 正文 年R本政府宣布衍腥,位于F島的核電站磺樱,受9級特大地震影響纳猫,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜竹捉,卻給世界環(huán)境...
    茶點故事閱讀 42,094評論 3 335
  • 文/蒙蒙 一芜辕、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧块差,春花似錦侵续、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,572評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至鹉动,卻和暖如春轧坎,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背泽示。 一陣腳步聲響...
    開封第一講書人閱讀 33,671評論 1 274
  • 我被黑心中介騙來泰國打工缸血, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人械筛。 一個月前我還...
    沈念sama閱讀 49,159評論 3 378
  • 正文 我出身青樓捎泻,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 45,747評論 2 361

推薦閱讀更多精彩內(nèi)容