swoole服务器如何做到无人值守100%可用

在某些情况下,如系统负载过大swoole无法申请到内存而挂掉、swoole底层发生段错误、Server占用内存过大被内核Kill,或者被某些程序误杀。那swoole-server将无法提供服务,导致业务中断,公司收入出现损失。

有一个非常有效并且在BAT等大型公司常用的方案是crontab重启监控。原理是每1分钟执行一次shell脚本,检测server的master进程是否存活,如果存在则跳过。如果发现主进程已经挂掉,则执行restart逻辑,先kill掉所有残留的子进程,然后重新启动Server。

使用下面的脚本需要将Server程序的进程名称设置为master,如 cli_set_process_title("php server.php: master")

如果在系统的crontab中加入:

  1. */1 * * * * /data/script/check_server.sh

/data/script/check_server.sh:

  1. count=`ps -fe |grep "server.php" | grep -v "grep" | grep "master" | wc -l`
  2. echo $count
  3. if [ $count -lt 1 ]; then
  4. ps -eaf |grep "server.php" | grep -v "grep"| awk '{print $2}'|xargs kill -9
  5. sleep 2
  6. ulimit -c unlimited
  7. /usr/local/bin/php /data/webroot/server.php
  8. echo "restart";
  9. echo $(date +%Y-%m-%d_%H:%M:%S) >/data/log/restart.log
  10. fi

可以改进的地方

  • 可以通过netstat -lnp 检测端口是否在监听,如果未在监听,则执行restart
  • 通过一个check.php发送一段带有逻辑的请求,试探服务器是否可以正常工作,如果无法工作,执行restart
  • 使用supervisor监控进程的工具
  • 如果在Docker容器中使用,可以在docker run时增加参数—restart=always