Fosiul.com

 
 
#!/bin/bash
################################################################################
#SVN Version: 28
#Script Version 28
#Purpose of this script:
#Check Bellow options between 4 mysql Master/Master Replication
#1.Every Mysql servers are online: Status:Done
#2.If Slave process is running:    Status:Done
#3.If Slave IO process is running: Status:Done
#4.If There is any bin log position difference between Master/Slave: Status:Done
#5.Check time in processlist for:Status: In Development
#6.If problem found change  Master server info in Slave
#7. Change Dns record(A record) to stop comming http request to the problematic sever
#################################################################################
 
#Status check for nagios script
 
STATE_OK=0
STATE_WARNING=1
STATE_CRITICAL=2
STATE_UNKNOWN=3
STATE_DEPENDENT=4
 
 
#Define All the variables
 
declare -rx SCRIPT=${0##*/}
declare -rx CMD_AWK="/bin/awk"
declare -rx CMD_MYSQL="/usr/local/mysql/bin/mysql"
declare -rx CMD_GREP="/bin/grep"
 
##Define value for nagios is to fire for certain conditions for log check
 
CRITICAL_VALUE=100
CRITICAL_VALUE=50
NORMAL_VALUE=0
 
#######################################################################
#####Define All the servers Ip, username and password for mysql server#
#######################################################################
declare -rx SLV_MSTRServerA="Ip.of.your.server"
declare -rx SLV_MSTRServerA_USER="noslave"
declare -rx SLV_MSTRServerA_PASSWD="password"
 
#Slave/Master ServerB (NodeB-web.yourdomian.co.uk)
 
declare -rx SLV_MSTRServerB="ip.of.your.server"
declare -rx SLV_MSTRServerB_USER="noslave"
declare -rx SLV_MSTRServerB_PASSWD="password"
 
#Slave/Master ServerC (NodeC-http.yourdomain.local)
 
declare -rx SLV_MSTRServerC="localhost"
declare -rx SLV_MSTRServerC_USER="noslave"
declare -rx SLV_MSTRServerC_PASSWD="password"
 
 
#Slave/Master ServerD (NodeD-beaver.yourdomain.local)
 
declare -rx SLV_MSTRServerD="ip.of.your.server"
declare -rx SLV_MSTRServerD_USER="noslave"
declare -rx SLV_MSTRServerD_PASSWD="password"
 
#Global Variables
declare -a result
 
 
#Definning Variable for Array
 
declare -a SLV_MSTRServerS=($SLV_MSTRServerA $SLV_MSTRServerB $SLV_MSTRServerC $SLV_MSTRServerD)
declare -a SLV_MSTRServerS_USERS=($SLV_MSTRServerA_USER $SLV_MSTRServerB_USER $SLV_MSTRServerC_USER $SLV_MSTRServerD_USER)
declare -a SLV_MSTRServerS_PASSWD=($SLV_MSTRServerA_PASSWD $SLV_MSTRServerB_PASSWD $SLV_MSTRServerC_PASSWD $SLV_MSTRServerD_PASSWD )
declare -a SLV_ServerAppLS=("SLV_MAIL" "SLV_WEB" "SLV_HTTP" "SLV_BEVR")
declare -a MSTR_ServerAppLS=("MSTR_MAIL" "MSTR_WEB" "MSTR_HTTP" "MSTR_BEVR")
 
 
###########################################################
#Section-1.0:function-Command: My Mysql Servers are online#
###########################################################
 
function FUNC_CHECK_SERVER_ONLINE_CMD
{
 
$CMD_MYSQL -h "$1"  -u"$2" -p"$3" -e "show slave status\G" >/dev/null 2>&1
 
return $?
 
}
 
 
###########################################################
#Section-2.0: Function-Command:If Slave_IO_Running#########
###########################################################
 
function FUNC_CHK_SLV_IO_RUN_CMD
{
 
echo $($CMD_MYSQL -h "$1"  -u"$2" -p"$3" -e "show slave status\G" | $CMD_GREP Slave_IO_Running | awk '{ print $2 }' )
 
}
 
 
##########################################################
#Section-3.0: Function-Command:If Slave_SQL_running#######
##########################################################
 
function FUNC_CHK_SLV_SQL_RUN_CMD
{
 
echo $($CMD_MYSQL -h "$1"  -u"$2" -p"$3" -e "show slave status\G" | $CMD_GREP Slave_SQL_Running | awk '{ print $2 }' )
 
}
 
##########################################################
#Section-4.0: Function-Command:#######
##########################################################
 
function FUNC_CHK_SLV_LOG_POS_CMD
{
 
echo $($CMD_MYSQL -h "$1"  -u"$2" -p"$3" -e "show slave status\G" | $CMD_GREP Read_Master_Log_Pos | awk '{ print $2}' )
 
 
}
 
 
 
##########################################################
#Section-5.0: Function-Command:#######
##########################################################
 
function FUNC_CHK_MSTR_LOG_POS_CMD
{
 
echo $($CMD_MYSQL -h "$1"  -u"$2" -p"$3" -e "show master status" | $CMD_GREP bin | cut -f2 )
 
 
}
 
 
###########################################################
#Section-1.1: If all Mysql Server is Online################
##Implementing Secton 1.0(ref:FUNC_CHECK_SERVER_ONLINE_CMD#
###########################################################
 
function FUNC_CHECK_SERVER_ONLINE()
{
i=0
COUNT=${#SLV_MSTRServerS[*]}
while [ $i -lt $COUNT ]
do
 
if ! $(FUNC_CHECK_SERVER_ONLINE_CMD "${SLV_MSTRServerS[$i]}" "${SLV_MSTRServerS_USERS[$i]}" "${SLV_MSTRServerS_PASSWD[$i]}"  )
 
then
echo " Server IP: ${SLV_MSTRServerS[$i]},is not running "
exit $STATE_CRITICAL
exit 99
fi
 
 
i=$(($i+1))
 
done
 
#echo "All Server are Online"
#exit $STATE_OK
 
}
 
 
###########################################################
#Section-2.1: If Slave_IO_Running IS RUNNING OR NOT########
##Implementing Secton 2.0(ref:FUNC_CHK_SLV_IO_RUN_CMD######
###########################################################
 
 
 
function FUNC_CHK_SLV_IO_RUN()
{
 
i=0
COUNT=${#SLV_MSTRServerS[*]}
while [ $i -lt $COUNT ]
do
result[$i]=$(FUNC_CHK_SLV_IO_RUN_CMD "${SLV_MSTRServerS[$i]}" "${SLV_MSTRServerS_USERS[$i]}" "${SLV_MSTRServerS_PASSWD[$i]}" )
i=$(($i+1))
done
 
 
i=0
while [ $i -lt $COUNT ]
do
if [ ${result[$i]} != "Yes" ]
then
echo "In Server IP: ${SLV_MSTRServerS[$i]},Slave_IO_running is not running "
exit $STATE_CRITICAL
 
fi
i=$(($i + 1 ))
done
#echo "ALL Servers are running fine"
#exit $STATE_OK
 
}
 
###########################################################
#Section-3.1: IF Slave_SQL_Running OR NOT#################
##Implementing Secton 3.0(ref:FUNC_CHK_SLV_SQL_RUN_CMD#####
###########################################################
 
function FUNC_CHK_SLV_SQL_RUN()
 
{
i=0
COUNT=${#SLV_MSTRServerS[*]}
while [ $i -lt $COUNT ]
 
do
result[$i]=$(FUNC_CHK_SLV_SQL_RUN_CMD "${SLV_MSTRServerS[$i]}" "${SLV_MSTRServerS_USERS[$i]}" "${SLV_MSTRServerS_PASSWD[$i]}" )
i=$(($i+1))
done
 
 
i=0
while [ $i -lt $COUNT ]
do
if [ ${result[$i]} != "Yes" ]
then
echo "In Server IP: ${SLV_MSTRServerS[$i]},Slave_SQL_Running is not running "
exit $STATE_CRITICAL
 
fi
i=$(($i + 1 ))
done
 
 
}
 
###########################################################
#Section-4.1: GETTING MASTER LOG POSITION FROM EACH SLAVE##
##Implementing Secton 4.0(ref:FUNC_CHK_SLV_LOG_POS_CMD#####
###########################################################
 
 
function FUNC_CHK_SLV_LOG_POS ()
 
{
i=0
COUNT=${#SLV_MSTRServerS[*]}
while [ $i -lt $COUNT ]
 
do
result[$i]=$(FUNC_CHK_SLV_LOG_POS_CMD "${SLV_MSTRServerS[$i]}" "${SLV_MSTRServerS_USERS[$i]}" "${SLV_MSTRServerS_PASSWD[$i]}" )
i=$(($i+1))
done
 
i=0
while [ $i -lt $COUNT ]
do
eval ${SLV_ServerAppLS[$i]}=${result[$i]}
 
 
i=$(($i + 1 ))
done
 
 
}
 
###########################################################
#Section-5.1: GETTING MASTER LOG POSITION FROM EACH MASTER#
##Implementing Secton 5.0(ref:FUNC_CHK_MSTR_LOG_POS_CMD#####
###########################################################
 
 
 
function FUNC_CHK_MSTR_LOG_POS ()
 
{
i=0
COUNT=${#SLV_MSTRServerS[*]}
while [ $i -lt $COUNT ]
 
do
result[$i]=$(FUNC_CHK_MSTR_LOG_POS_CMD "${SLV_MSTRServerS[$i]}" "${SLV_MSTRServerS_USERS[$i]}" "${SLV_MSTRServerS_PASSWD[$i]}" )
i=$(($i+1))
done
 
 
i=0
while [ $i -lt $COUNT ]
do
eval ${MSTR_ServerAppLS[$i]}=${result[$i]}
 
 
i=$(($i + 1 ))
done
 
 
}
 
#########################################################################################
 
#Section-4.1/5.1: FIND OUT LOG POSITION DIFFERENCE#######################################
##Implementing Secton 4.1 and 5.1(ref:FUNC_CHK_SLV_LOG_POS) AND   FUNC_CHK_MSTR_LOG_POS##
#########################################################################################
 
 
function FUNC_FIND_LOG_POS_DIFF ()
 
{
################################################################
##Calling FUNC_CHK_SRV_LOG_POS and FUNC_CHK_MSTR_LOG_POS########
## To Get All the output from Servers###########################
################################################################
 
FUNC_CHK_SLV_LOG_POS
FUNC_CHK_MSTR_LOG_POS
 
echo "Master log position from each master(show master status)"
echo "mail: $MSTR_MAIL"
echo "web: $MSTR_WEB"
echo "http: $MSTR_HTTP"
echo " beaver: $MSTR_BEVR"
 
 
 
echo "MAster log position from each  Slave(show slave status) "
echo "mail: $SLV_MAIL"
echo "web: $SLV_WEB"
echo "http: $SLV_HTTP"
echo "beaver: $SLV_BEVR"
 
 
 
 
### note : $SLV_MAIL will be equal to $MSTR_BEVR
### Note : $SLV_WEB will be equal to $MSTR_MAIL
### Note : $SLV_HTTP will be equal to $MSTR_WEB
### Note : $SLV_BEVR will be equal to $MSTR_HTTP
 
if [ $SLV_MAIL -ne $MSTR_BEVR ]
 
then
echo "Problem between Server Mail: $SLV_MAIL and Server BEVR:$MSTR_BEVR"
exit $STATE_CRITICAL
fi
 
if [ $SLV_WEB -ne $MSTR_MAIL ]
 
then
 
echo "Problem between Server WEB:$SLV_WEB and Server MAIL:$MSTR_MAIL"
exit $STATE_CRITICAL
fi
 
if [ $SLV_HTTP -ne $MSTR_WEB ]
 
then
echo "Problem between Server HTTP:$SLV_HTTP  and Server WEB:$MSTR_WEB "
exit $STATE_CRITICAL
fi
 
if [ $SLV_BEVR -ne $MSTR_HTTP ]
 
then
echo "Problem between Server BEVR:$SLV_BEVR and Server HTTP:$MSTR_HTTP"
exit $STATE_CRITICAL
fi
 
 
}
 
 
######################################################################
#Calling all function from  section [1.1,2.1,3.1,4.1,5.1]#############
######################################################################
 
FUNC_CHECK_SERVER_ONLINE
FUNC_CHK_SLV_IO_RUN
FUNC_CHK_SLV_SQL_RUN
FUNC_FIND_LOG_POS_DIFF
 
 
#####################################################################
## If there is not any error from section[1.1,2.1,3.1,4.1,5.1]#######
## then show bellow commands to ensure nagios all OK ################
#####################################################################
 
 
 
#echo $SLV_HTTP
#echo $SLV_BEVR
 
#echo $MSTR_MAIL
#echo $MSTR_WEB
#echo $MSTR_HTTP
#echo $MSTR_BEVR
 
echo "ALL Servers are running fine"
exit $STATE_OK