告警系統主腳本、告警系統配置文件、告警系統監控項目

告警系統主腳本

定義監控系統的每個目錄，然後再去定義主腳本，因爲是分佈式，所以每一臺都需要這樣去做，當然事先創建好每個目錄以及每個腳本，隨後就把這臺機器上的所有腳本直接拷貝到另外一臺機器上去，然後做些更改。

---

小約定以後把所有的shell腳本都放在/usr/local/sbin/下方便去查找

---

假如說把主腳本放在/usr/local/sbin/下，一下創建各種目錄

把主腳本放在bin下，主腳本作爲一個入口，應該去判斷配置文件看一看某些服務，某些監控項目是否需要監控，還需要調取各個需要監控的子腳本

[root@100xuni1 bin]# vim main.sh                 ##編輯主腳本，寫入一下代碼，
#!/bin/bash
#Written by aming.
# 是否發送郵件的開關
export send=1
# 過濾ip地址
export addr=`/sbin/ifconfig |grep -A1 "ens33: "|awk '/inet/ {print $2}'`
dir=`pwd`
# 只需要最後一級目錄名
last_dir=`echo $dir|awk -F'/' '{print $NF}'`
# 下面的判斷目的是，保證執行腳本的時候，我們在bin目錄裏，不然監控腳本、郵件和日誌很有可能找不到
if [ $last_dir == "bin" ] || [ $last_dir == "bin/" ]; then
    conf_file="../conf/mon.conf"
else
    echo "you shoud cd bin dir"
    exit
fi
exec 1>>../log/mon.log 2>>../log/err.log
echo "`date +"%F %T"` load average"
/bin/bash ../shares/load.sh
#先檢查配置文件中是否需要監控502
if grep -q 'to_mon_502=1' $conf_file; then
    export log=`grep 'logfile=' $conf_file |awk -F '=' '{print $2}' |sed 's/ //g'`
    /bin/bash  ../shares/502.sh
fi

告警系統配置文件

這個配置文件很簡單，定義一些開關，定一些日誌的路徑，比如說監控mysql的時候，定義mysql的用戶名密碼，以及IP地址，port端口等等

[root@100xuni1 mon]# vim conf/mon.conf   
## to config the options if to monitor
## 定義mysql的服務器地址、端口以及user、password
to_mon_cdb=0   ##0 or 1, default 0,0 not monitor, 1 monitor
db_ip=10.20.3.13
db_port=3315
db_user=username
db_pass=passwd
## httpd   如果是1則監控，爲0不監控
to_mon_httpd=0
## php 如果是1則監控，爲0不監控
to_mon_php_socket=0
## http_code_502  需要定義訪問日誌的路徑
to_mon_502=1
logfile=/data/log/xxx.xxx.com/access.log
## request_count   定義日誌路徑以及域名
to_mon_request_count=0
req_log=/data/log/www.discuz.net/access.log
domainname=www.discuz.net

告警系統監控項目

定義幾個子腳本，所謂的監控系統監控項目。

[root@100xuni1 mon]# cd shares/
[root@100xuni1 shares]# vim load.sh
#! /bin/bash
##Writen by aming##
load=`uptime |awk -F 'average:' '{print $2}'|cut -d',' -f1|sed 's/ //g' |cut -d. -f1`
if [ $load -gt 10 ] && [ $send -eq "1" ]
then
    echo "$addr `date +%T` load is $load" >../log/load.tmp
    /bin/bash ../mail/mail.sh [email protected] "$addr\_load:$load" `cat ../log/load.tmp`
fi
echo "`date +%T` load is $load"

告警系統502.sh

502需要有個日誌沒有日誌就不能找到狀態碼，

[root@100xuni1 shares]# vim 502.sh
#! /bin/bash
d=`date -d "-1 min" +%H:%M`
c_502=`grep :$d:  $log  |grep ' 502 '|wc -l`
if [ $c_502 -gt 10 ] && [ $send == 1 ]; then
     echo "$addr $d 502 count is $c_502">../log/502.tmp
     /bin/bash ../mail/mail.sh $addr\_502 $c_502  ../log/502.tmp
fi
echo "`date +%T` 502 $c_502"

告警系統disk.sh，他的思路是把所有的分區挨個看下

[root@100xuni1 shares]# vim disk.sh
#! /bin/bash
##Writen by aming##
rm -f ../log/disk.tmp
for r in `df -h |awk -F '[ %]+' '{print $5}'|grep -v Use`
do
    if [ $r -gt 90 ] && [ $send -eq "1" ]
then
    echo "$addr `date +%T` disk useage is $r" >>../log/disk.tmp
fi
if [ -f ../log/disk.tmp ]
then
    df -h >> ../log/disk.tmp
    /bin/bash ../mail/mail.sh $addr\_disk $r ../log/disk.tmp
    echo "`date +%T` disk useage is nook"
else
    echo "`date +%T` disk useage is ok"
fi