shell脚本监控进程挂掉自动重启

  • 生产实践:

    用于Gitlab sidekiq进程挂掉自动重启

  • 学习技巧:

    while、if语句、检测记数function,sidekiq启动

  • 脚本内容:      

上次搞了个通宵,把公司用了大几年的gitlab从8.11一步步手动编译升级到了11.4.14,没想到踩了个大坑,这个版本的sidekiq调用re2正则库兼容性不好,导致gitlab执行ci时sidekiq会触发bug挂掉。官方目前没有给出解决方案,只能想办法填坑,老板强力要求升级也只能硬刚啊,相关issue如下:

不过issue有人说升级到11.1没有这个问题,直接看看脚本:

#!/bin/bash
##############################################################################
# $Name:         check_queue.sh
# $Version:      v1.0
# $Function:     Automatic restart sidekiq
# $Author:       Zhihe An
# $Copyright (c) https://chegva.com
# $Create Date:  2019-04-18
##############################################################################

. /etc/profile

logfile=/home/anzhihe/logs/siqinfo.log

check_service(){
    count=0
    # 用seq来控制每次检测时间,设置的总时间要>sidekiq拉起服务的时间
    for i in `seq 9 13`
    do
        check_sq=$(ps -efa |grep -v grep|grep -c "sidekiq 5.2.1")
        if [ ${check_sq} -eq 0 ]
        then
            ((count++))
            sleep $i
        else
            echo "${date_now} Sidekiq队列已成功启动!" >> ${logfile}
            curl "http://chegva.com/alarm.php?mobile=110&msg='Gitlab Siq队列已重启,请关注!'"
            break
        fi
    done
    
    if [ $count -eq 5 ];then
        # 检测5次sidekiq队列还没拉起来,则继续重启
        cd /home/git/gitlab && sudo -u git -H RAILS_ENV=production bin/background_jobs start
        echo "${date_now} Sidekiq队列检察5次后重启!" >> ${logfile}
        curl "http://chegva.com/alarm.php?mobile=110&msg='Gitlab Siq队列已检察5次重启,请关注!'"
    fi
}

while true
do
    date_now=$(date +"%Y-%m-%d %H:%M:%S")
    num_sq=$(ps -efa |grep -v grep|grep -c "sidekiq 5.2.1")
    # 脚本每3s扫一次,当sidekiq进程挂了时就自动检测重启
    if [ ${num_sq} -eq 0 ];then
        cd /home/git/gitlab && sudo -u git -H RAILS_ENV=production bin/background_jobs start
        check_service
    else
        sleep 3
    fi
done

#nohup /bin/bash /home/anzhihe/shell/check_queue.sh &

◎查看效果shell脚本监控进程挂掉自动重启

有了这个脚本生活才过得去,不然现在只怕已经下岗了!shell脚本监控进程挂掉自动重启

anzhihe 安志合个人博客,版权所有 丨 如未注明,均为原创 丨 转载请注明转自:https://chegva.com/3471.html | ☆★★每天进步一点点,加油!★★☆ | 

您可能还感兴趣的文章!

发表评论

电子邮件地址不会被公开。 必填项已用*标注