supervisor进程管理

Supervisor is a client/server system that allows its users to monitor and control a number of processes on UNIX-like operating systems.

Supervisor是一款Linux下的进程管理软件。最主要的两个功能是:

将非daemon程序变成deamon方式运行
对程序进行监控，当程序退出时，可以自动拉起程序
supervisor的官网：Supervisor。supervisor管理进程，就是通过fork/exec的方式把这些被管理的进程，当作supervisor的子进程来启动。如果要深入原理，可以查看这篇linux下python守护进程编写和原理理解

python编写守护进程（daemon）

fork子进程，而后父进程退出，此时子进程会被init进程接管。
修改子进程的工作目录、创建新进程组和新会话、修改umask。
子进程再次fork一个进程，这个进程可以称为孙子进程，而后子进程退出。
重定向孙子进程的标准输入流、标准输出流、标准错误流到/dev/null。

#!/usr/bin/env python
#coding=utf8
 
import os, sys, time
 
#产生子进程，而后父进程退出
pid = os.fork()
if pid > 0:
    sys.exit(0)
 
#修改子进程工作目录
os.chdir("/")
#创建新的会话，子进程成为会话的首进程
os.setsid()
#修改工作目录的umask
os.umask(0)
 
#创建孙子进程，而后子进程退出
pid = os.fork()
if pid > 0:
    sys.exit(0)
 
#重定向标准输入流、标准输出流、标准错误
sys.stdout.flush()
sys.stderr.flush()
si = file("/dev/null", 'r')
so = file("/dev/null", 'a+')
se = file("/dev/null", 'a+', 0)
os.dup2(si.fileno(), sys.stdin.fileno())
os.dup2(so.fileno(), sys.stdout.fileno())
os.dup2(se.fileno(), sys.stderr.fileno())
 
#孙子进程的程序内容
while True:
    time.sleep(10)
    f = open('/home/test.txt', 'a')
    f.write('hello')

supervisor配置

[unix_http_server]
file=/tmp/supervisor.sock   ; UNIX socket 文件，supervisorctl 会使用
;chmod=0700                 ; socket 文件的 mode，默认是 0700
;chown=nobody:nogroup       ; socket 文件的 owner，格式： uid:gid
;[inet_http_server]         ; HTTP 服务器，提供 web 管理界面
;port=127.0.0.1:9001        ; Web 管理后台运行的 IP 和端口，如果开放到公网，需要注意安全性
;username=user              ; 登录管理后台的用户名
;password=123               ; 登录管理后台的密码
[supervisord]
logfile=/tmp/supervisord.log ; 日志文件，默认是 $CWD/supervisord.log
logfile_maxbytes=50MB        ; 日志文件大小，超出会 rotate，默认 50MB
logfile_backups=10           ; 日志文件保留备份数量默认 10
loglevel=info                ; 日志级别，默认 info，其它: debug,warn,trace
pidfile=/tmp/supervisord.pid ; pid 文件
nodaemon=false               ; 是否在前台启动，默认是 false，即以 daemon 的方式启动
minfds=1024                  ; 可以打开的文件描述符的最小值，默认 1024
minprocs=200                 ; 可以打开的进程数的最小值，默认 200
; the below section must remain in the config file for RPC
; (supervisorctl/web interface) to work, additional interfaces may be
; added by defining them in separate rpcinterface: sections
[rpcinterface:supervisor]
supervisor.rpcinterface_factory = supervisor.rpcinterface:make_main_rpcinterface
[supervisorctl]
serverurl=unix:///tmp/supervisor.sock ; 通过 UNIX socket 连接 supervisord，路径与 unix_http_server 部分的 file 一致
;serverurl=http://127.0.0.1:9001 ; 通过 HTTP 的方式连接 supervisord
; 包含其他的配置文件
[include]
files = relative/directory/*.ini    ; 可以是 *.conf 或 *.ini

维护命令

supervisor可通过维护命令supervisorctl管理或者通过web管理界面，supervisorctl又分为命令式和交互式

# 查询各进程运行状态
supervisorctl status
# 启、停、重启业务进程,check12306为进程名,即[program:check12306]里配置的值
supervisorctl start check12306
supervisorctl stop check12306
supervisorctl restart check12306
#重启所有属于名为groupworker这个分组的进程
supervisorctl start groupworker
supervisorctl stop groupworker
supervisorctl restart groupworker
#启、停、重启全部进程(不会载入最新的配置文件)
supervisorctl start all
supervisorctl stop all
supervisorctl restart all
#重新加载配置文件.停止原有进程并按新的配置启动所有进程
supervisorctl reload
#根据最新的配置文件,启动新配置或有改动的进程,配置没有改动的进程不会受影响而重启。
supervisorctl update

多进程运行

[program:TornadoBlog]
command=python /opt/data/product/blog/run.py --port=80%(process_num)02d
process_name=80%(process_num)02d
stdout_logfile=/opt/data/product/blog/log/tornado-80%(process_num)02d.log
numprocs=2
numprocs_start=0
autorestart=true
redirect_stderr=true

参考资料

Linux 守护进程的启动方法
 supervisord website

python编写守护进程（daemon）

supervisor配置

维护命令

参考资料

CATALOG

FEATURED TAGS

FRIENDS