k8s日志收集實戰(zhàn)

基礎知識

Docker 引擎日志

Docker 引擎日志 一般是交給了 Upstart(Ubuntu 14.04) 或者 systemd (CentOS 7, Ubuntu 16.04)。前者一般位于 /var/log/upstart/docker.log 下,后者一般通過 jounarlctl -u docker 來讀取刁绒。不同系統(tǒng)的位置都不一樣.

系統(tǒng)日志位置

  • Ubuntu(14.04) /var/log/upstart/docker.log
  • Ubuntu(16.04) journalctl -u docker.service
  • CentOS 7/RHEL 7/Fedora journalctl -u docker.service
  • CoreOS journalctl -u docker.service
  • OpenSuSE journalctl -u docker.service
  • OSX ~/Library/Containers/com.docker.docker/Data/com.docker.driver.amd64-linux/log/d??ocker.log
  • Debian GNU/Linux 7 /var/log/daemon.log
  • Debian GNU/Linux 8 journalctl -u docker.service
  • Boot2Docker /var/log/docker.log

容器日志

容器的日志 則可以通過 docker logs 命令來訪問,而且可以像 tail -f 一樣涣澡,使用 docker logs -f 來實時查看纠脾。如果使用 Docker Compose,則可以通過 docker-compose logs <服務名> 來查看演怎。

如果深究其日志位置大诸,每個容器的日志默認都會以 json-file 的格式存儲于 /var/lib/docker/containers/<容器id>/<容器id>-json.log 下捅厂,不過并不建議去這里直接讀取內(nèi)容贯卦,因為 Docker 提供了更完善地日志收集方式 - Docker 日志收集驅(qū)動。

關于日志收集焙贷,Docker 內(nèi)置了很多日志驅(qū)動撵割,可以通過類似于 fluentd, syslog 這類服務收集日志。無論是 Docker 引擎辙芍,還是容器啡彬,都可以使用日志驅(qū)動。比如故硅,如果打算用 fluentd 收集某個容器日志庶灿,可以這樣啟動容器:

$ docker run -d \
–log-driver=fluentd \
–log-opt fluentd-address=10.2.3.4:24224 \
–log-opt tag=”docker.{{.Name}}” \
nginx

其中 10.2.3.4:24224 是 fluentd 服務地址,實際環(huán)境中應該換成真實的地址吃衅。

dockerd 日志配置

要改變dockerd的日志為debug往踢,可以重啟dockerd,并提供啟動參數(shù)-D或–debug徘层,示例如下:

dockerd -D

dockerd的日志文件峻呕,默認為/var/log/messages,也可以重定向到其他日志文件趣效,示例如下:

dockerd -D >> log_file 2>&1

方法二:
vi /etc/docker/daemon.json

{  
  "debug": true  
}

重啟docker daemon

systemctl stop docker 
systemctl daemon-reload 
systemctl start docker

dockerd的日志級別
dockerd支持的日志級別debug, info, warn, error, fatal瘦癌,默認的日志級別為info。必要的情況下跷敬,還需要設置日志級別讯私,這也可以通過配置文件,或者通過啟動參數(shù)-l或–log-level西傀。
方法一:配置文件/etc/docker/daemon.json

{  
  "log-level": "debug"  
} 

方法二:

dockerd --log-level debug  
dockerd -l debug

1
查看日志
方法一:

tail -f /var/log/messages

方法二:

watch -d -n 1 cat /var/log/messages

-d表示高亮不同的地方妄帘,-n表示多少秒刷新一次。
該指令池凄,不會直接返回命令行,而是實時打印日志文件中新增加的內(nèi)容鬼廓,這一特性肿仑,對于查看日志是非常有效的。如果想終止輸出碎税,按 Ctrl+C 即可

日志收集方案

最后編輯于
?著作權歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末尤慰,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子雷蹂,更是在濱河造成了極大的恐慌伟端,老刑警劉巖,帶你破解...
    沈念sama閱讀 211,042評論 6 490
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件匪煌,死亡現(xiàn)場離奇詭異责蝠,居然都是意外死亡党巾,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 89,996評論 2 384
  • 文/潘曉璐 我一進店門霜医,熙熙樓的掌柜王于貴愁眉苦臉地迎上來齿拂,“玉大人,你說我怎么就攤上這事肴敛∈鸷#” “怎么了?”我有些...
    開封第一講書人閱讀 156,674評論 0 345
  • 文/不壞的土叔 我叫張陵医男,是天一觀的道長砸狞。 經(jīng)常有香客問我,道長镀梭,這世上最難降的妖魔是什么刀森? 我笑而不...
    開封第一講書人閱讀 56,340評論 1 283
  • 正文 為了忘掉前任,我火速辦了婚禮丰辣,結(jié)果婚禮上撒强,老公的妹妹穿的比我還像新娘。我一直安慰自己笙什,他們只是感情好飘哨,可當我...
    茶點故事閱讀 65,404評論 5 384
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著琐凭,像睡著了一般芽隆。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上统屈,一...
    開封第一講書人閱讀 49,749評論 1 289
  • 那天胚吁,我揣著相機與錄音,去河邊找鬼愁憔。 笑死腕扶,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的吨掌。 我是一名探鬼主播半抱,決...
    沈念sama閱讀 38,902評論 3 405
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼膜宋!你這毒婦竟也來了窿侈?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,662評論 0 266
  • 序言:老撾萬榮一對情侶失蹤秋茫,失蹤者是張志新(化名)和其女友劉穎史简,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體肛著,經(jīng)...
    沈念sama閱讀 44,110評論 1 303
  • 正文 獨居荒郊野嶺守林人離奇死亡圆兵,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,451評論 2 325
  • 正文 我和宋清朗相戀三年跺讯,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片衙傀。...
    茶點故事閱讀 38,577評論 1 340
  • 序言:一個原本活蹦亂跳的男人離奇死亡抬吟,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出统抬,到底是詐尸還是另有隱情火本,我是刑警寧澤,帶...
    沈念sama閱讀 34,258評論 4 328
  • 正文 年R本政府宣布聪建,位于F島的核電站钙畔,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏金麸。R本人自食惡果不足惜擎析,卻給世界環(huán)境...
    茶點故事閱讀 39,848評論 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望挥下。 院中可真熱鬧揍魂,春花似錦、人聲如沸棚瘟。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,726評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽偎蘸。三九已至庄蹋,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間迷雪,已是汗流浹背限书。 一陣腳步聲響...
    開封第一講書人閱讀 31,952評論 1 264
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留章咧,地道東北人倦西。 一個月前我還...
    沈念sama閱讀 46,271評論 2 360
  • 正文 我出身青樓,卻偏偏與公主長得像赁严,于是被迫代替她去往敵國和親扰柠。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 43,452評論 2 348