logstash 新版7.0用messages獲取日志里的時間并替換@timestamp

??個人logtash最重要和方便的功能就是日志的過濾和分類了,特此記錄一下syslog的時間過濾和替換@timestamp的方法后专。

???網上大多數(shù)的過濾規(guī)則和替換方法與新版不太相同划鸽,詳情建議參考官方文檔中過濾插件的日期一欄,既然都看到這里了logstash的使用方法我就不介紹了行贪,直接上干貨漾稀,logstash配置里的filter書寫(重點是grok的正則和添加tag):

filter {
        grok{
           match => ["message","(?<logdate>%{MONTH} +%{MONTHDAY} %{TIME})"]
           }
        date{
           match => [ "logdate", "MMM dd HH:mm:ss"]
           locale => "en"
           add_tag => "@timestamp"
           timezone => "Asia/Shanghai"
        }
       mutate{
           remove_field => ["logdate"]
        }
}

??這是可以匹配出/var/log/messages的系統(tǒng)日志時間的并替換掉@timestamp

效果圖:


image.png

可以看出messages與@timestamp完全一致

分享一下Logstash正則表達式分享的地址和在線grok測試的地址
在線gork正則的地址:http://grokdebug.herokuapp.com/
Logstash基礎正則地址:https://github.com/elastic/logstash/blob/v1.4.2/patterns/grok-patterns

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
  • 序言:七十年代末模闲,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子崭捍,更是在濱河造成了極大的恐慌尸折,老刑警劉巖,帶你破解...
    沈念sama閱讀 222,000評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件殷蛇,死亡現(xiàn)場離奇詭異实夹,居然都是意外死亡,警方通過查閱死者的電腦和手機粒梦,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,745評論 3 399
  • 文/潘曉璐 我一進店門亮航,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人匀们,你說我怎么就攤上這事缴淋。” “怎么了泄朴?”我有些...
    開封第一講書人閱讀 168,561評論 0 360
  • 文/不壞的土叔 我叫張陵重抖,是天一觀的道長。 經常有香客問我祖灰,道長钟沛,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 59,782評論 1 298
  • 正文 為了忘掉前任局扶,我火速辦了婚禮恨统,結果婚禮上,老公的妹妹穿的比我還像新娘三妈。我一直安慰自己畜埋,他們只是感情好,可當我...
    茶點故事閱讀 68,798評論 6 397
  • 文/花漫 我一把揭開白布沈跨。 她就那樣靜靜地躺著由捎,像睡著了一般。 火紅的嫁衣襯著肌膚如雪饿凛。 梳的紋絲不亂的頭發(fā)上狞玛,一...
    開封第一講書人閱讀 52,394評論 1 310
  • 那天,我揣著相機與錄音涧窒,去河邊找鬼心肪。 笑死,一個胖子當著我的面吹牛纠吴,可吹牛的內容都是我干的硬鞍。 我是一名探鬼主播,決...
    沈念sama閱讀 40,952評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼固该!你這毒婦竟也來了锅减?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 39,852評論 0 276
  • 序言:老撾萬榮一對情侶失蹤伐坏,失蹤者是張志新(化名)和其女友劉穎怔匣,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體桦沉,經...
    沈念sama閱讀 46,409評論 1 318
  • 正文 獨居荒郊野嶺守林人離奇死亡每瞒,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 38,483評論 3 341
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了纯露。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片剿骨。...
    茶點故事閱讀 40,615評論 1 352
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖埠褪,靈堂內的尸體忽然破棺而出浓利,到底是詐尸還是另有隱情,我是刑警寧澤钞速,帶...
    沈念sama閱讀 36,303評論 5 350
  • 正文 年R本政府宣布荞膘,位于F島的核電站,受9級特大地震影響玉工,放射性物質發(fā)生泄漏。R本人自食惡果不足惜淘菩,卻給世界環(huán)境...
    茶點故事閱讀 41,979評論 3 334
  • 文/蒙蒙 一遵班、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧潮改,春花似錦狭郑、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,470評論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至糕殉,卻和暖如春亩鬼,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背阿蝶。 一陣腳步聲響...
    開封第一講書人閱讀 33,571評論 1 272
  • 我被黑心中介騙來泰國打工雳锋, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人羡洁。 一個月前我還...
    沈念sama閱讀 49,041評論 3 377
  • 正文 我出身青樓玷过,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子辛蚊,可洞房花燭夜當晚...
    茶點故事閱讀 45,630評論 2 359