一、centos7下安裝supervisor
- 安裝方法很多刽射,舉例一種
yum install python-setuptools
easy_install supervisor
-
測(cè)試是否安裝成功
echo_supervisord_conf
- 新建supervisor文件夾**
mkdir /etc/supervisor
- 生成默認(rèn)的配置文件
echo_supervisord_conf > /etc/supervisor/supervisord.conf
-
然后編輯這個(gè)配置文件,配置成讀取conf.d文件夾的配置文件,這樣就不用寫(xiě)在一個(gè)文件里面:
image.png -
同時(shí)將[inet_http_server]下的注釋去掉,修改為:
image.png - 配置文件:
[root@centos-011 ~ 07:50:00]#cat /etc/supervisord.conf.bak
; Sample supervisor config file.
[unix_http_server]
file=/var/run/supervisor/supervisor.sock ; socket 路徑
;chmod=0700 ; socket 文件的權(quán)限
;chown=nobody:nogroup ; socket 所屬用戶(hù)及組
;username=user ; 用戶(hù)名
;password=123 ; 密碼
[inet_http_server] ; HTTP 服務(wù)器悼院,提供 web 管理界面
port=0.0.0.0:9001 ; Web 管理后臺(tái)運(yùn)行的 IP 和端口,如果開(kāi)放到公網(wǎng)翘贮,需要注意安全性
username=user ; 登錄管理后臺(tái)的用戶(hù)名
password=123 ; 登錄管理后臺(tái)的密碼
[supervisord] ; supervisord 全局配置
logfile=/var/log/supervisor/supervisord.log ; supervisor 日志路徑
logfile_maxbytes=50MB ; 單個(gè)日志文件最大數(shù)
logfile_backups=10 ; 保留多少個(gè)日志文件(默認(rèn)10個(gè))
loglevel=info ; (log level;default info; others: debug,warn,trace)
pidfile=/var/run/supervisord.pid ; pid 文件路徑
nodaemon=false ; 啟動(dòng)是否丟到前臺(tái)迂曲,設(shè)置為false 覆享,表示以daemon 的方式啟動(dòng)
minfds=1024 ; 最小文件打開(kāi)數(shù)佳遂,對(duì)應(yīng)系統(tǒng)limit.conf 中的nofile ,默認(rèn)最小為1024,最大為4096
minprocs=200 ; 最小的進(jìn)程打開(kāi)數(shù)撒顿,對(duì)應(yīng)系統(tǒng)的limit.conf 中的nproc,默認(rèn)為200
;umask=022 ; (process file creation umask;default 022)
;user=chrism ; 啟動(dòng)supervisord 服務(wù)的用戶(hù)丑罪,默認(rèn)為root
;identifier=supervisor ; (supervisord identifier, default is 'supervisor')
;directory=/tmp ; 這里的目錄指的是服務(wù)的工作目錄
;nocleanup=true ; (don't clean up tempfiles at start;default false)
;childlogdir=/tmp ; ('AUTO' child log dir, default $TEMP)
;environment=KEY=value ; (key value pairs to add to environment)
;strip_ansi=false ; (strip ansi escape codes in logs; def. false)
; the below section must remain in the config file for RPC
; (supervisorctl/web interface) to work, additional interfaces may be
; added by defining them in separate rpcinterface: sections
[rpcinterface:supervisor]
supervisor.rpcinterface_factory = supervisor.rpcinterface:make_main_rpcinterface
[supervisorctl]
serverurl=unix:///var/run/supervisor/supervisor.sock ; use a unix:// URL for a unix socket ;通過(guò) UNIX socket 連接 supervisord,路徑與 unix_http_server 部分的 file 一致
;serverurl=http://127.0.0.1:9001 ; use an http:// url to specify an inet socket
;username=chris ; should be same as http_username if set
;password=123 ; should be same as http_password if set
;prompt=mysupervisor ; cmd line prompt (default "supervisor")
;history_file=~/.sc_history ; use readline history if available
; The below sample program section shows all possible program subsection values,
; create one or more 'real' program: sections to be able to control them under
; supervisor.
;[program:theprogramname] ; 定義一個(gè)守護(hù)進(jìn)程 ,比如下面的elasticsearch
;command=/bin/cat ; 啟動(dòng)程序使用的命令巍糯,可以是絕對(duì)路徑或者相對(duì)路徑
;process_name=%(program_name)s ; 一個(gè)python字符串表達(dá)式啸驯,用來(lái)表示supervisor進(jìn)程啟動(dòng)的這個(gè)的名稱(chēng),默認(rèn)值是%(program_name)s
;numprocs=1 ; Supervisor啟動(dòng)這個(gè)程序的多個(gè)實(shí)例祟峦,如果numprocs>1罚斗,則process_name的表達(dá)式必須包含%(process_num)s,默認(rèn)是1
;directory=/tmp ; supervisord在生成子進(jìn)程的時(shí)候會(huì)切換到該目錄
;umask=022 ; umask for process (default None)
;priority=999 ; 權(quán)重宅楞,可以控制程序啟動(dòng)和關(guān)閉時(shí)的順序针姿,權(quán)重越低:越早啟動(dòng),越晚關(guān)閉厌衙。默認(rèn)值是999
;autostart=true ; 如果設(shè)置為true距淫,當(dāng)supervisord啟動(dòng)的時(shí)候,進(jìn)程會(huì)自動(dòng)啟動(dòng)
;autorestart=true ; 設(shè)置為隨 supervisord 重啟而重啟婶希,值可以是false榕暇、true、unexpected喻杈。false:進(jìn)程不會(huì)自動(dòng)重啟
;startsecs=10 ; 程序啟動(dòng)后等待多長(zhǎng)時(shí)間后才認(rèn)為程序啟動(dòng)成功彤枢,默認(rèn)是10秒
;startretries=3 ; supervisord嘗試啟動(dòng)一個(gè)程序時(shí)嘗試的次數(shù)。默認(rèn)是3
;exitcodes=0,2 ; 一個(gè)預(yù)期的退出返回碼筒饰,默認(rèn)是0,2缴啡。
;stopsignal=QUIT ; 當(dāng)收到stop請(qǐng)求的時(shí)候,發(fā)送信號(hào)給程序瓷们,默認(rèn)是TERM信號(hào)业栅,也可以是 HUP, INT, QUIT, KILL, USR1, or USR2
;stopwaitsecs=10 ; 在操作系統(tǒng)給supervisord發(fā)送SIGCHILD信號(hào)時(shí)等待的時(shí)間
;user=chrism ; 如果supervisord以root運(yùn)行,則會(huì)使用這個(gè)設(shè)置用戶(hù)啟動(dòng)子程序
;redirect_stderr=true ; 如果設(shè)置為true谬晕,進(jìn)程則會(huì)把標(biāo)準(zhǔn)錯(cuò)誤輸出到supervisord后臺(tái)的標(biāo)準(zhǔn)輸出文件描述符
;stdout_logfile=/a/path ; 把進(jìn)程的標(biāo)準(zhǔn)輸出寫(xiě)入文件中碘裕,如果stdout_logfile沒(méi)有設(shè)置或者設(shè)置為AUTO,則supervisor會(huì)自動(dòng)選擇一個(gè)文件位置
;stdout_logfile_maxbytes=1MB ; 標(biāo)準(zhǔn)輸出log文件達(dá)到多少后自動(dòng)進(jìn)行輪轉(zhuǎn)攒钳,單位是KB娘汞、MB、GB夕玩。如果設(shè)置為0則表示不限制日志文件大小
;stdout_logfile_backups=10 ; 標(biāo)準(zhǔn)輸出日志輪轉(zhuǎn)備份的數(shù)量,默認(rèn)是10惊豺,如果設(shè)置為0燎孟,則不備份
;stdout_capture_maxbytes=1MB ; 當(dāng)進(jìn)程處于stderr capture mode模式的時(shí)候,寫(xiě)入FIFO隊(duì)列的最大bytes值尸昧,單位可以是KB揩页、MB、GB
;stdout_events_enabled=false ; 如果設(shè)置為true烹俗,當(dāng)進(jìn)程在寫(xiě)它的stderr
;stderr_logfile=/a/path ; 把進(jìn)程的錯(cuò)誤日志輸出一個(gè)文件中爆侣,除非redirect_stderr參數(shù)被設(shè)置為true
;stderr_logfile_maxbytes=1MB ; 錯(cuò)誤log文件達(dá)到多少后自動(dòng)進(jìn)行輪轉(zhuǎn)萍程,單位是KB、MB兔仰、GB茫负。如果設(shè)置為0則表示不限制日志文件大小
;stderr_logfile_backups=10 ; 錯(cuò)誤日志輪轉(zhuǎn)備份的數(shù)量,默認(rèn)是10乎赴,如果設(shè)置為0忍法,則不備份
;stderr_capture_maxbytes=1MB ; 當(dāng)進(jìn)程處于stderr capture mode模式的時(shí)候,寫(xiě)入FIFO隊(duì)列的最大bytes值榕吼,單位可以是KB饿序、MB、GB
;stderr_events_enabled=false ; 如果設(shè)置為true羹蚣,當(dāng)進(jìn)程在寫(xiě)它的stderr到文件描述符的時(shí)候原探,PROCESS_LOG_STDERR事件會(huì)被觸發(fā)
;environment=A=1,B=2 ; 一個(gè)k/v對(duì)的list列表
;serverurl=AUTO ; 是否允許子進(jìn)程和內(nèi)部的HTTP服務(wù)通訊,如果設(shè)置為AUTO顽素,supervisor會(huì)自動(dòng)的構(gòu)造一個(gè)url
; The below sample eventlistener section shows all possible
; eventlistener subsection values, create one or more 'real'
; eventlistener: sections to be able to handle event notifications
; sent by supervisor.
#這個(gè)地方是自定義一個(gè)守護(hù)進(jìn)程
[program:elasticsearch] ; 定義一個(gè)守護(hù)進(jìn)程 elasticsearch
environment=ES_HOME=/usr/local/elasticsearch ; 設(shè)置ES_HOME 環(huán)境變量
user=elk ; 啟動(dòng)elasticsearch 的用戶(hù)
directory=/usr/local/elasticsearch ; 進(jìn)入到這個(gè)目錄中
command=/usr/local/elasticsearch/bin/elasticsearch ; 執(zhí)行啟動(dòng)命令
numprocs=1 ; Supervisor啟動(dòng)這個(gè)程序的多個(gè)實(shí)例咽弦,如果numprocs>1,則process_name的表達(dá)式必須包含%(process_num)s戈抄,默認(rèn)是1
autostart=true ; 設(shè)置為隨 supervisord 啟動(dòng)而啟動(dòng)
autorestart=true ; 設(shè)置為隨 supervisord 重啟而重啟
startretries=3 ; 設(shè)置elasticsearch 重啟的重試次數(shù)
priority=1 ; 權(quán)重离唬,可以控制程序啟動(dòng)和關(guān)閉時(shí)的順序,權(quán)重越低:越早啟動(dòng)划鸽,越晚關(guān)閉输莺。默認(rèn)值是999
;[eventlistener:theeventlistenername]
;command=/bin/eventlistener ; the program (relative uses PATH, can take args)
;process_name=%(program_name)s ; process_name expr (default %(program_name)s)
;numprocs=1 ; number of processes copies to start (def 1)
;events=EVENT ; event notif. types to subscribe to (req'd)
;buffer_size=10 ; event buffer queue size (default 10)
;directory=/tmp ; directory to cwd to before exec (def no cwd)
;umask=022 ; umask for process (default None)
;priority=-1 ; the relative start priority (default -1)
;autostart=true ; start at supervisord start (default: true)
;autorestart=unexpected ; restart at unexpected quit (default: unexpected)
;startsecs=10 ; number of secs prog must stay running (def. 1)
;startretries=3 ; max # of serial start failures (default 3)
;exitcodes=0,2 ; 'expected' exit codes for process (default 0,2)
;stopsignal=QUIT ; signal used to kill process (default TERM)
;stopwaitsecs=10 ; max num secs to wait b4 SIGKILL (default 10)
;user=chrism ; setuid to this UNIX account to run the program
;redirect_stderr=true ; redirect proc stderr to stdout (default false)
;stdout_logfile=/a/path ; stdout log path, NONE for none; default AUTO
;stdout_logfile_maxbytes=1MB ; max # logfile bytes b4 rotation (default 50MB)
;stdout_logfile_backups=10 ; # of stdout logfile backups (default 10)
;stdout_events_enabled=false ; emit events on stdout writes (default false)
;stderr_logfile=/a/path ; stderr log path, NONE for none; default AUTO
;stderr_logfile_maxbytes=1MB ; max # logfile bytes b4 rotation (default 50MB)
;stderr_logfile_backups ; # of stderr logfile backups (default 10)
;stderr_events_enabled=false ; emit events on stderr writes (default false)
;environment=A=1,B=2 ; process environment additions
;serverurl=AUTO ; override serverurl computation (childutils)
; The below sample group section shows all possible group values,
; create one or more 'real' group: sections to create "heterogeneous"
; process groups.
;[group:thegroupname] ; 服務(wù)組管理,可以將多個(gè)服務(wù)名寫(xiě)到這里管理(組名自定義)
;programs=progname1,progname2 ; 上面配置好的服務(wù)名裸诽,比如elasticsearch,kibana,logstash
;priority=999 ; the relative start priority (default 999)
; The [include] section can just contain the "files" setting. This
; setting can list multiple files (separated by whitespace or
; newlines). It can also contain wildcards. The filenames are
; interpreted as relative to this file. Included files *cannot*
; include files themselves.
[include]
files = /etc/supervisor/conf.d/*.conf
- 接下來(lái)就是編寫(xiě)執(zhí)行命令了嫂用,在/etc/supervisor下新建conf.d文件夾,
在里面新建一個(gè)conf文件丈冬,命令內(nèi)容如下(注意前后不能有空格
)嘱函。
一般放在:/etc/supervisor/conf.d/目錄 。一個(gè)腳本對(duì)應(yīng)一個(gè)配置文件埂蕊。
[program:yourprogramname]
command=python meipaiUser.py
directory=/home/tomcat/pyscripts/recommendation/videoWebsiteCrawler/videoWebsiteCrawler ;項(xiàng)目啟動(dòng)目錄
stdout_logfile=/home/tomcat/pyscripts/recommendation/videoWebsiteCrawler/meipaiuser.log ;日志輸出目錄
;autostart = true ; 在 supervisord 啟動(dòng)的時(shí)候也自動(dòng)啟動(dòng)
;startsecs = 5 ; 啟動(dòng) 5 秒后沒(méi)有異常退出往弓,就當(dāng)作已經(jīng)正常啟動(dòng)了
;autorestart = true ; 程序異常退出后自動(dòng)重啟
;startretries = 3 ; 啟動(dòng)失敗自動(dòng)重試次數(shù),默認(rèn)是 3
;user = leon ; 用哪個(gè)用戶(hù)啟動(dòng)
;redirect_stderr = true ; 把 stderr 重定向到 stdout蓄氧,默認(rèn) false
;stdout_logfile_maxbytes = 20MB ; stdout 日志文件大小函似,默認(rèn) 50MB
;stdout_logfile_backups = 20 ; stdout 日志文件備份數(shù)
; stdout 日志文件,需要注意當(dāng)指定目錄不存在時(shí)無(wú)法正常啟動(dòng)喉童,所以需要手動(dòng)創(chuàng)建目錄(supervisord 會(huì)自動(dòng)創(chuàng)建日志文件)
; 可以通過(guò) environment 來(lái)添加需要的環(huán)境變量撇寞,一種常見(jiàn)的用法是修改 PYTHONPATH
; environment=PYTHONPATH=$PYTHONPATH:/path/to/somewhere
- 啟動(dòng)Supervisor服務(wù)
supervisord -c /etc/supervisor/supervisord.conf 或 supervisord
- 任務(wù)管理
-
supervisorctl
命令進(jìn)入 supervisorctl 的 shell 界面,然后可以執(zhí)行不同的命令了:
-
> status #查看正在運(yùn)行的程序狀態(tài)
> stop program_name #關(guān)閉 program_name 程序
> start program_name #啟動(dòng) program_name 程序
> restart program_name #重啟 program_name 程序
> reload #讀取有更新(增加)的配置文件,不會(huì)啟動(dòng)新添加的程序
> update #重啟配置文件修改過(guò)的程序
> stop all #關(guān)閉所有程序
-----------------------------------------
supervisorctl stop all蔑担,停止全部進(jìn)程牌废,注:start、restart啤握、stop都不會(huì)載入最新的配置文件鸟缕。
supervisorctl reload,載入最新的配置文件恨统,停止原有進(jìn)程并按新的配置啟動(dòng)叁扫、管理所有進(jìn)程。
supervisorctl update畜埋,根據(jù)最新的配置文件莫绣,啟動(dòng)新配置或有改動(dòng)的進(jìn)程,配置沒(méi)有改動(dòng)的進(jìn)程不會(huì)受影響而重啟
注:顯示用stop停止掉的進(jìn)程悠鞍,用reload或者update都不會(huì)自動(dòng)重啟对室。
- 也可以通過(guò)web界面,出于安全考慮咖祭,默認(rèn)配置是沒(méi)有開(kāi)啟web管理界面,需要修改supervisord.conf配置文件打開(kāi)http訪權(quán)限:
[inet_http_server] ; inet (TCP) server disabled by default
port=0.0.0.0:9001 ; (ip_address:port specifier, *:port for all iface)
username=user ; (default is no username (open server))
password=123 ; (default is no password (open server))
訪問(wèn)http://ip:9001
即可進(jìn)行任務(wù)管理么翰。(如果訪問(wèn)不了,記得把Linux的防火墻關(guān)閉)
查看自己的程序是否運(yùn)行成功
ps -ef | grep supervisor
二檐迟、開(kāi)機(jī)啟動(dòng)Supervisor服務(wù)
- 配置systemctl服務(wù)
進(jìn)入/lib/systemd/system目錄,并創(chuàng)建supervisord.service文件
[Unit]
Description=supervisor
After=network.target
[Service]
Type=forking
ExecStart=/usr/bin/supervisord -c /etc/supervisor/supervisord.conf
ExecStop=/usr/bin/supervisorctl $OPTIONS shutdown
ExecReload=/usr/bin/supervisorctl $OPTIONS reload
KillMode=process
Restart=on-failure
RestartSec=42s
[Install]
WantedBy=multi-user.target
- 設(shè)置開(kāi)機(jī)啟動(dòng)
systemctl daemon-reload
systemctl enable supervisord.service
- 修改文件權(quán)限為766
chmod 766 supervisord.service
- 配置service類(lèi)型服務(wù)
#!/bin/bash
#
# supervisord This scripts turns supervisord on
#
# Author: Mike McGrath <mmcgrath@redhat.com> (based off yumupdatesd)
#
# chkconfig: - 95 04
#
# description: supervisor is a process control utility. It has a web based
# xmlrpc interface as well as a few other nifty features.
# processname: supervisord
# config: /etc/supervisor/supervisord.conf
# pidfile: /var/run/supervisord.pid
#
# source function library
. /etc/rc.d/init.d/functions
RETVAL=0
start() {
echo -n $"Starting supervisord: "
daemon "supervisord -c /etc/supervisor/supervisord.conf "
RETVAL=$?
echo
[ $RETVAL -eq 0 ] && touch /var/lock/subsys/supervisord
}
stop() {
echo -n $"Stopping supervisord: "
killproc supervisord
echo
[ $RETVAL -eq 0 ] && rm -f /var/lock/subsys/supervisord
}
restart() {
stop
start
}
case "$1" in
start)
start
;;
stop)
stop
;;
restart|force-reload|reload)
restart
;;
condrestart)
[ -f /var/lock/subsys/supervisord ] && restart
;;
status)
status supervisord
RETVAL=$?
;;
*)
echo $"Usage: $0 {start|stop|status|restart|reload|force-reload|condrestart}"
exit 1
esac
exit $RETVAL
- 將上述腳本內(nèi)容保存到/etc/rc.d/init.d/supervisor文件中追迟,修改文件權(quán)限為755骚腥,并設(shè)置開(kāi)機(jī)啟動(dòng)
chmod 755 /etc/rc.d/init.d/supervisord
chkconfig supervisor on
注意:
Supervisor只能管理非daemon的進(jìn)程,也就是說(shuō)Supervisor不能管理守護(hù)進(jìn)程束铭。否則提示Exited too quickly(process log may have details)異常。例子中的Tomcat默認(rèn)是以守護(hù)進(jìn)程啟動(dòng)的契沫,所以我們改成了catalina.sh run,以前臺(tái)進(jìn)程的方式運(yùn)行埠褪。