docker-compose部署ELK(logstash敦间、elasticsearch瓶逃、kibana),監(jiān)控日志

一廓块、第一步在docker上安裝ELK

1厢绝、創(chuàng)建目錄

mkdir /home/xijie/app/myelk

2、從github上拉取部署elk所需資料

$ git clone https://github.com/deviantony/docker-elk.git

下載完畢的資料目錄如下:

image

3带猴、進入剛下載的文件夾內

$ cd docker-elk

4代芜、通過docker-compose創(chuàng)建并啟動容器

$ docker-compose up -d

5、這個時候通過docker ps可以看到logstash浓利、elasticsearch挤庇、kibana容器已經(jīng)創(chuàng)建并且啟動。

image

可以看該elk容器的默認端口為:

  • 5000: Logstash TCP input.
  • 9200: Elasticsearch HTTP
  • 9300: Elasticsearch TCP transport
  • 5601: Kibana

Kibana的web入口:
http://localhost:5601

6贷掖、接下來進行參數(shù)配置嫡秕,來實現(xiàn)springboot通過ELK查看日志信息。

修改logstash的配置苹威,

進入logstash配置文件所在目錄:

cd /home/xijie/app/myelk/dokcer-elk/logstash/pipeline

打開配置文件:

vim logstash.conf

修改內容如下:

input{        tcp {                mode => "server"                port => 5000                codec => json_lines                tags => ["data-http"]        }}filter{    json{        source => "message"        remove_field => ["message"]    }}output{    if "data-http" in [tags]{        elasticsearch{                hosts=> ["elasticsearch:9200"]                index => "data-http-%{+YYYY.MM.dd}"                }        stdout{codec => rubydebug}    }}

注:

input標簽為logstash進數(shù)據(jù)接口昆咽,filter標簽為數(shù)據(jù)過濾器,output為數(shù)據(jù)出去接口牙甫。

input標簽使用的是tcp掷酗,說明springboot客戶端需要將日志傳遞到該接口,該接口正是logstash服務器接口窟哺。

filter將message字段去掉泻轰,只是為了當展示springboot的http請求接口的數(shù)據(jù)更加規(guī)整,而不是全部展示在message字段中且轨。

output標簽將數(shù)據(jù)傳遞給了elasticsearch浮声,這里使用了if虚婿,當判斷所出數(shù)據(jù)為所指定tag,才進行下面的配置泳挥。特別要注意index的配置然痊,該值在kibana中需要使用,這里指定的index值為:data-http屉符,要注意該值與tag是沒有關系的剧浸,要注意區(qū)分。

進入docker-elk目錄

/home/xijie/app/myelk/docker-elk
然后重啟

docker-compose restart
關于elasticsearch矗钟、logstash辛蚊、kibana的配置都在對應目錄下的config文件夾中的.yml文件中,只需要修改該文件即可真仲。

二袋马、springboot日志系統(tǒng)配置logstash

1、pom中配置logstash

<dependency>
<groupId>net.logstash.logback</groupId>
<artifactId>logstash-logback-encoder</artifactId>
<version>5.2</version>
</dependency>
2秸应、application.properties文件中配置如下:

logstash日志收集地址虑凛,即logstash服務器地址

logstash.ip_port=172.168.0.165:5000

日志保存級別

logging.all.level=info

日志保存地址,該值與logstash沒關系软啼,是當日志存在本地File文件內的文件夾地址

logging.levelfile=/home/logs/data-center-service
2桑谍、logback.xml文件內容如下,該文件在resources目錄
文章地址:https://blog.csdn.net/zhizhuodewo6/article/details/86630712

?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
  • 序言:七十年代末祸挪,一起剝皮案震驚了整個濱河市锣披,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌贿条,老刑警劉巖雹仿,帶你破解...
    沈念sama閱讀 218,525評論 6 507
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異整以,居然都是意外死亡胧辽,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,203評論 3 395
  • 文/潘曉璐 我一進店門公黑,熙熙樓的掌柜王于貴愁眉苦臉地迎上來邑商,“玉大人,你說我怎么就攤上這事凡蚜∪硕希” “怎么了?”我有些...
    開封第一講書人閱讀 164,862評論 0 354
  • 文/不壞的土叔 我叫張陵朝蜘,是天一觀的道長恶迈。 經(jīng)常有香客問我,道長芹务,這世上最難降的妖魔是什么蝉绷? 我笑而不...
    開封第一講書人閱讀 58,728評論 1 294
  • 正文 為了忘掉前任,我火速辦了婚禮枣抱,結果婚禮上熔吗,老公的妹妹穿的比我還像新娘。我一直安慰自己佳晶,他們只是感情好桅狠,可當我...
    茶點故事閱讀 67,743評論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著轿秧,像睡著了一般中跌。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上菇篡,一...
    開封第一講書人閱讀 51,590評論 1 305
  • 那天漩符,我揣著相機與錄音,去河邊找鬼驱还。 笑死嗜暴,一個胖子當著我的面吹牛,可吹牛的內容都是我干的议蟆。 我是一名探鬼主播闷沥,決...
    沈念sama閱讀 40,330評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼咐容!你這毒婦竟也來了舆逃?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 39,244評論 0 276
  • 序言:老撾萬榮一對情侶失蹤戳粒,失蹤者是張志新(化名)和其女友劉穎路狮,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體蔚约,經(jīng)...
    沈念sama閱讀 45,693評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡览祖,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 37,885評論 3 336
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了炊琉。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片展蒂。...
    茶點故事閱讀 40,001評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖苔咪,靈堂內的尸體忽然破棺而出锰悼,到底是詐尸還是另有隱情,我是刑警寧澤团赏,帶...
    沈念sama閱讀 35,723評論 5 346
  • 正文 年R本政府宣布箕般,位于F島的核電站,受9級特大地震影響舔清,放射性物質發(fā)生泄漏丝里。R本人自食惡果不足惜曲初,卻給世界環(huán)境...
    茶點故事閱讀 41,343評論 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望杯聚。 院中可真熱鬧臼婆,春花似錦、人聲如沸幌绍。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,919評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽傀广。三九已至颁独,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間伪冰,已是汗流浹背誓酒。 一陣腳步聲響...
    開封第一講書人閱讀 33,042評論 1 270
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留贮聂,地道東北人丰捷。 一個月前我還...
    沈念sama閱讀 48,191評論 3 370
  • 正文 我出身青樓,卻偏偏與公主長得像寂汇,于是被迫代替她去往敵國和親病往。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 44,955評論 2 355