需求场景:使用ubuntu服务器,在virtualenv架设了celery+flask+gunicorn作为前后端服务,故决定使用supervisor作为守护程序确保前后台正常运作。
supervisor的安装
sudo apt-get install supervisor
生成配置文件
echo_supervisord_conf > /etc/supervisord.conf
配置文件示例以及解释
[unix_http_server]
file=/tmp/supervisor.sock ; UNIX socket 文件,supervisorctl 会使用
;chmod=0700 ; socket 文件的 mode,默认是 0700
;chown=nobody:nogroup ; socket 文件的 owner,格式: uid:gid
;[inet_http_server] ; HTTP 服务器,提供 web 管理界面
;port=127.0.0.1:9001 ; Web 管理后台运行的 IP 和端口,如果开放到公网,需要注意安全性
;username=user ; 登录管理后台的用户名
;password=123 ; 登录管理后台的密码
[supervisord]
logfile=/tmp/supervisord.log ; 日志文件,默认是 $CWD/supervisord.log
logfile_maxbytes=50MB ; 日志文件大小,超出会 rotate,默认 50MB
logfile_backups=10 ; 日志文件保留备份数量默认 10
loglevel=info ; 日志级别,默认 info,其它: debug,warn,trace
pidfile=/tmp/supervisord.pid ; pid 文件
nodaemon=false ; 是否在前台启动,默认是 false,即以 daemon 的方式启动
minfds=1024 ; 可以打开的文件描述符的最小值,默认 1024
minprocs=200 ; 可以打开的进程数的最小值,默认 200
; the below section must remain in the config file for RPC
; (supervisorctl/web interface) to work, additional interfaces may be
; added by defining them in separate rpcinterface: sections
[rpcinterface:supervisor]
supervisor.rpcinterface_factory = supervisor.rpcinterface:make_main_rpcinterface
[supervisorctl]
serverurl=unix:///tmp/supervisor.sock ; 通过 UNIX socket 连接 supervisord,路径与 unix_http_server 部分的 file 一致
;serverurl=http://127.0.0.1:9001 ; 通过 HTTP 的方式连接 supervisord
; 包含其他的配置文件
[include]
files = relative/directory/*.ini ; 可以是 *.conf 或 *.ini
启动supervisor
supervisord -c /etc/supervisord.conf 或 supervisord
program 配置
-
我们在/etc/supervisord.conf里最后面include配置修改一下,支持/etc/supervisor/路径的所有conf
[include] files = /etc/supervisor/*.conf
配置实例
-
新建3个配置文件
cd /etc/supervisor/ 进入/etc/supervisor路径 touch gunicorn.conf 新建gunicorn.conf文件 cp gunicorn.conf celery.conf 复制 cp gunicorn.conf customer.conf 复制
-
修改配置文件gunicorn.conf
[program:gunicorn-myapp] #名称 directory=/var/www/myflask #程序在该路径下运行 user = root #运行用户root command=/root/venv/bin/gunicorn -b 0.0.0.0:5000 -k gevent -w 4 app.wsgi #运行命令,gunicorn为virtualenv的gunicorn autostart = true #在supervisord 启动的时候也自动启动 startsecs = 5 #启动 1 秒后没有异常退出,就当作已经正常启动了 autorestart = true #程序异常退出后自动重启 startretries = 3 #启动失败自动重试次数,默认是 3 stdout_logfile=/var/log/gunicorn/worker.log #日志文件若文件夹不存在需新建 stderr_logfile=/var/log/gunicorn/worker_error.log #错误日志 environment=ENV_CONFIG=production #设置环境变量
-
修改配置文件celery.conf (参照步骤2)
[program:celery-myapp] directory=/var/www/myflask user = root command=/root/venv/bin/celery worker -A app.tools.tasks --loglevel=info autostart = true startsecs = 5 autorestart = true startretries = 3 stdout_logfile=/var/log/celery/worker.log stderr_logfile=/var/log/celery/worker_error.log environment=ENV_CONFIG=production
4.修改配置文件customer.conf(celery的消费程序)
[program:customer-myapp]
directory=/root/workder/
user = root
process_name=%(program_name)s_%(process_num)02d #如果进程数量numprocs大于1,这里需要修改,如果为1可以不设置,这里为4
numprocs=4 #对该命令启动4个进程
command=/root/venv/bin/python customer.py
autostart = true
startsecs = 5
autorestart = true
startretries = 3
stdout_logfile=/var/log/constumer/worker.log
stderr_logfile=/var/log/constumer/worker_error.log
environment=ENV_CONFIG=production
- 重新加载这几个配置文件
方法1-关闭supervisord服务再打开
supervisorctl shutdown
supervisord
方法2- 重新加载conf
supervisorctl reload
6.查看配置运行情况
supervisorctl status
目前出现的问题
运行supervisor命令出现
unix:///tmp/supervisor.sock no such file报错
解决方法为修改supervisor.conf将默认的file和serverurl路径修改为(保持一致)
file=/var/run/supervisor.sock ; (the path to the socket file)
serverurl=unix:///var/run/supervisor.sock ; use a unix:// URL for a unix socket