七泵琳、Supervisor進程管理利器

概要

周五發(fā)現(xiàn)在各個線上的環(huán)境中摄职,有個目錄中存了大量的日志信息,非常的占用磁盤空間获列,經(jīng)過查看發(fā)現(xiàn)是由于之前在建立由Supervison管理的任務(wù)時谷市,各個進程的日志管理配置不統(tǒng)一導(dǎo)致。有的日志200M有的500M击孩,有的日志數(shù)量5個也有30個的迫悠。為了便于管理并且節(jié)省磁盤空間,準備將所有的日志設(shè)置為每200M分隔一次巩梢,共5次创泄。
在完成該工作的過程中需要了解以下幾點:
1、supervisor的使用
2括蝠、sed替換匹配模式之后的一整行
3鞠抑、awk和xargs的聯(lián)合使用

Supervisor簡單介紹

Linux的后臺進程運行有好幾種方法,例如nohup忌警,screen等搁拙,但是,如果是一個服務(wù)程序法绵,要可靠地在后臺運行箕速,我們就需要把它做成daemon,最好還能監(jiān)控進程狀態(tài)礼烈,在意外結(jié)束時能自動重啟弧满。Supervisor就是用Python開發(fā)的一套通用的進程管理程序,能將一個普通的命令行進程變?yōu)楹笈_daemon此熬,并監(jiān)控進程狀態(tài)庭呜,異常退出時能自動重啟。
在使用Supervisor時犀忱,可以隨時使用Supervisor的客戶端Supervisorctl來管理進程募谎,查看狀態(tài),重啟阴汇,停止等数冬。

supervisor在EPEL源中,使用yum安裝需要先安裝EPEL源
[root@localhost ~]# yum install supervisor
[root@localhost ~]# rpm -ql supervisor
/etc/logrotate.d/supervisor
/etc/rc.d/init.d/supervisord
/etc/supervisord.conf     
/usr/bin/supervisorctl
/usr/bin/supervisord

修改配置文件并且創(chuàng)建被其管理的進程,可以直接在主配置文件中定義各個進程拐纱,但是在生產(chǎn)環(huán)境中我們經(jīng)常要有許多進程需要被管理铜异,那么通常會在一個子配置文件夾中,為各個進程分別創(chuàng)建各自的配置文件秸架,那么我們需要在主配置文件中定義子配置文件夾目錄:

[root@localhost ~]# vi /etc/supervisord.conf    
[include]
files = /etc/supervisor/*.ini
新增以上兩行揍庄,文件可以使用ini結(jié)尾或者是conf結(jié)尾的文件
[root@localhost ~]#  vi /etc/supervisor/program1.ini
[program:program1]                                   #定義該進程的在supervisor中的名稱
command=/www/site/program/program_name arg1 arg2     #定義該進程啟動的腳本命令
autostart = true                                     #在supervisord 啟動的時候也自動啟動
startsecs = 5                                        #啟動 5 秒后沒有異常退出,就當作已經(jīng)正常啟動了
autorestart = true                                   #程序異常退出后自動重啟
startretries = 3                                     #啟動失敗自動重試次數(shù)东抹,默認是 3
redirect_stderr = true                               #把 stderr 重定向到 stdout蚂子,默認 false
stdout_logfile_maxbytes = 200MB                      #stdout 日志文件大小,默認 50MB
stdout_logfile_backups = 5                           #stdout 日志文件備份數(shù)
stdout_logfile = /www/site/logs/program1.log    #stdout 日志文件
定義完進程之后缭黔,啟動supervisor食茎,若autostart = true,啟動supervisor時該進程也會自動啟動,啟動后就可以使用supervisorctl進程管理各個進程馏谨。
[root@localhost ~]# service supervisord start
[root@localhost ~]# supervisorctl status
program1                      RUNNING   pid 24128, uptime 0:01:56

在日常工作中别渔,需要用到的最多的就是需要新增一個supervisor管理的進程時,我們在增加完進程的配置文件之后田巴,不需要重啟supervisor钠糊,使用supervisorctl即可完成上線工作挟秤。

[root@localhost ~]# supervisorctl update new_program_name
[root@localhost ~]# supervisorctl start new_program_name

當然也會遇到批量重啟任務(wù)的時候壹哺,比如說某個研發(fā)GG改了最底層的某個進程內(nèi)容,那么需要重啟所有的進程才會恢復(fù)正常艘刚,可以使用all來完成

[root@localhost ~]# supervisorctl restart all   
[root@localhost ~]# supervisorctl
supervisor> restart
Error: restart requires a process name
restart <processname>           Restart a process.                          #重啟單個進程
restart <processname> <processname> Restart multiple processes              #重啟多個進程
restart all             Restart all processes                               #重啟所有進程

像我們這次需要完成的任務(wù)是將所有進程存留的日志格式規(guī)范化管宵,需要更新所有進程的配置文件,那邊我們需要先對所有進程進程update攀甚,然后在start一次箩朴,指的注意的是,我們在update已經(jīng)started的任務(wù)時秋度,supervisor會先停止該進程炸庞,然后進行更新,更新完之后并不會自動啟動進程荚斯。所以我們就需要了解到進程什么時候可以update埠居,執(zhí)行update停止進程時不會影響到線上業(yè)務(wù)時才可以執(zhí)行,要不然就要上演一場從更新進程到跑路的大戲了事期。滥壕。。

[root@localhost ~]# supervisorctl update all
[root@localhost ~]# supervisorctl start all

使用sed規(guī)范所有進程配置文件的日志配置

1兽泣、所有日志均存在 /etc/supervisor/*.ini中
2绎橘、定義日志大小的參數(shù)stdout_logfile_maxbytes
3、定義日志數(shù)量的參數(shù)stdout_logfile_backups
綜合以上三點來看雖然有幾十個進程配置文件唠倦,所幸還是有規(guī)律可選称鳞,所以完成起來也算簡單涮较,這時候就體現(xiàn)了sed的強大之處,基礎(chǔ)知識不扎實這個時候就要求助于google了冈止。

[root@localhost ~]# sed -i "s/^.*stdout_logfile_maxbytes.*$/stdout_logfile_maxbytes = 200MB/g" /etc/supervisor/*.ini     
[root@localhost ~]# sed -i "s/^.*stdout_logfile_backups.*$/stdout_logfile_backups = 5/g" */etc/supervisor/.ini 
[root@localhost ~]# supervisorctl update all
[root@localhost ~]# supervisorctl start all
#兩次整行替換法希,然后更新配置文件后啟動所有進程,大功告成~靶瘸!

更新完進程之后苫亦,還有一個問題就是處理目前已經(jīng)產(chǎn)生的日志了,在之前有很多的日志備份最多的存在30份怨咪,雖然更新了進程將所有的日志設(shè)置為5份屋剑,但是在不確定supervisor會不會回滾之前已經(jīng)產(chǎn)生的多余日志的情況下還是手動刪除為好,秉持著能用一條命令的情況下絕不使用兩條命令诗眨,執(zhí)行以下刪除命令即可:

[root@localhost ~]# ls /www/site/logs/*log.* | awk -F . '{if (NR>1){if ($NF>4)print $0}}' | xargs -t -n 1 rm -rf
#日志命名格式為
#program1.log
#program1.log.1
#program1.log.2
...
#program1.log.30
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末唉匾,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子匠楚,更是在濱河造成了極大的恐慌巍膘,老刑警劉巖,帶你破解...
    沈念sama閱讀 223,126評論 6 520
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件芋簿,死亡現(xiàn)場離奇詭異峡懈,居然都是意外死亡,警方通過查閱死者的電腦和手機与斤,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 95,421評論 3 400
  • 文/潘曉璐 我一進店門肪康,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人撩穿,你說我怎么就攤上這事磷支。” “怎么了食寡?”我有些...
    開封第一講書人閱讀 169,941評論 0 366
  • 文/不壞的土叔 我叫張陵雾狈,是天一觀的道長。 經(jīng)常有香客問我抵皱,道長善榛,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 60,294評論 1 300
  • 正文 為了忘掉前任叨叙,我火速辦了婚禮锭弊,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘擂错。我一直安慰自己味滞,他們只是感情好,可當我...
    茶點故事閱讀 69,295評論 6 398
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著剑鞍,像睡著了一般昨凡。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上蚁署,一...
    開封第一講書人閱讀 52,874評論 1 314
  • 那天便脊,我揣著相機與錄音,去河邊找鬼光戈。 笑死哪痰,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的久妆。 我是一名探鬼主播晌杰,決...
    沈念sama閱讀 41,285評論 3 424
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼筷弦!你這毒婦竟也來了肋演?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 40,249評論 0 277
  • 序言:老撾萬榮一對情侶失蹤烂琴,失蹤者是張志新(化名)和其女友劉穎爹殊,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體奸绷,經(jīng)...
    沈念sama閱讀 46,760評論 1 321
  • 正文 獨居荒郊野嶺守林人離奇死亡梗夸,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,840評論 3 343
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了健盒。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片绒瘦。...
    茶點故事閱讀 40,973評論 1 354
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖扣癣,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情憨降,我是刑警寧澤父虑,帶...
    沈念sama閱讀 36,631評論 5 351
  • 正文 年R本政府宣布,位于F島的核電站授药,受9級特大地震影響士嚎,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜悔叽,卻給世界環(huán)境...
    茶點故事閱讀 42,315評論 3 336
  • 文/蒙蒙 一莱衩、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧娇澎,春花似錦笨蚁、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,797評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽伪很。三九已至,卻和暖如春奋单,著一層夾襖步出監(jiān)牢的瞬間锉试,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,926評論 1 275
  • 我被黑心中介騙來泰國打工览濒, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留呆盖,地道東北人。 一個月前我還...
    沈念sama閱讀 49,431評論 3 379
  • 正文 我出身青樓贷笛,卻偏偏與公主長得像絮短,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子昨忆,可洞房花燭夜當晚...
    茶點故事閱讀 45,982評論 2 361

推薦閱讀更多精彩內(nèi)容

  • supervisor 是由python語言編寫丁频、基于linux操作系統(tǒng)的一款服務(wù)器管理工具,用以監(jiān)控服務(wù)器的運行邑贴,...
    每次哭都笑著奔跑閱讀 6,302評論 6 14
  • linux資料總章2.1 1.0寫的不好抱歉 但是2.0已經(jīng)改了很多 但是錯誤還是無法避免 以后資料會慢慢更新 大...
    數(shù)據(jù)革命閱讀 12,176評論 2 33
  • supervisor 管理進程簡明教程 1席里、Introduction 2、安裝 python 第三方包的安裝方法拢驾,...
    這段日子真的很難閱讀 31,903評論 4 15
  • Spring Boot 參考指南 介紹 轉(zhuǎn)載自:https://www.gitbook.com/book/qbgb...
    毛宇鵬閱讀 46,871評論 6 342
  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理奖磁,服務(wù)發(fā)現(xiàn),斷路器繁疤,智...
    卡卡羅2017閱讀 134,722評論 18 139