寶蘭德BES中間件一鍵巡檢

IT那活兒發(fā)布于2023-01-11 13:19 / 3692人閱讀

寶蘭德BES中間件一鍵巡檢

點(diǎn)擊上方“IT那活兒”公眾號，關(guān)注后了解更多內(nèi)容，不管IT什么活兒，干就完了！！！

隨著寶蘭德BES中間件的逐步上線，對其各實(shí)例的健康狀態(tài)進(jìn)行監(jiān)控巡檢是重中之重，本文詳細(xì)說明下我們在自動(dòng)化運(yùn)維平臺部署的寶蘭德BES一鍵巡檢。

“AMP平臺簡介：自動(dòng)化運(yùn)維管理平臺--內(nèi)置大量運(yùn)維操作原子場景，支持常見數(shù)據(jù)庫、中間件、云平臺、網(wǎng)絡(luò)設(shè)備等運(yùn)維操作自動(dòng)化能力。支撐八大運(yùn)維場景自動(dòng)化，覆蓋常見運(yùn)維工作。”

巡檢對象及內(nèi)容

一鍵巡檢的目的是針對寶蘭德BES的CPU狀態(tài)、SERVER運(yùn)行狀態(tài)、JVM堆運(yùn)行情況、線程運(yùn)行情況、隊(duì)列運(yùn)行情況以及JDBC的運(yùn)行狀態(tài)進(jìn)行一個(gè)全面巡檢。

數(shù)據(jù)來源

巡檢腳本的原始數(shù)據(jù)為BES監(jiān)控程序采集的bes.log日志，該日志每十秒寫入新的采集數(shù)據(jù)，如下圖所示：

實(shí)現(xiàn)腳本

腳本通過對上述提到的bes.log日志進(jìn)行數(shù)據(jù)提取加以判斷。

#!/bin/bash
##獲取要巡檢的最新一輪的數(shù)據(jù)信息
LOG_DIR="/bes/monitor_shsnc/BES95xMon.V01/bin"
V_TIME_1=`cat $LOG_DIR/bes.log | tail -1 | awk -F "[" {print $2}| awk -F "]" {print $1}`
V_TIME_2=`date -d "10 second ago $V_TIME_1" +"%Y-%m-%d %H:%M:%S"`
V_LOGNUM=`cat $LOG_DIR/bes.log|grep "$V_TIME_2"| wc -l`

##定義出參，0代表巡檢結(jié)果正常，反之則為異常。
MONI_CPU_COUNT=0
MONI_STATUS_COUNT=0
MONI_JVM_COUNT=0
MONI_THREAD_COUNT=0
MONI_QUEUE_COUNT=0
MONI_JDBC_COUNT=0

##判斷各項(xiàng)巡檢指標(biāo)是否正常
if [ $V_LOGNUM -eq 24 ]
then
cat $LOG_DIR/bes.log | grep "$V_TIME_2" |grep -v "Connected to" |while read line
do

InstanceName=`echo ${line} | awk -F | {print $2}`
MonitorItem=`echo ${line} | awk -F | {print $3}`


if [ "${MonitorItem}" == "Status" ] ##對SERVER狀態(tài)進(jìn)行判斷
then
Status=`echo ${line} | awk -F | {print $4}`
if [ "${Status}" != "OK" ]
then
((MONI_STATUS_COUNT++))
echo "${InstanceName} Status is ${Status},Please check! "
fi

elif [ "${MonitorItem}" == "CpuUsed" ] ##對CPU運(yùn)行狀態(tài)進(jìn)行判斷
then
CpuUsed_1=`echo ${line} | awk -F | {print $4}`
CpuUsed=`awk BEGIN{printf ($CpuUsed_1)*100}`
if [ $CpuUsed -ge 20000 ]
then
((MONI_CPU_COUNT++))
echo "${InstanceName} CpuUsed is ${CpuUsed},Please check! "
fi

elif [ "${MonitorItem}" == "JVMUsed" ] ##對JVM運(yùn)行狀態(tài)進(jìn)行判斷
then
JVMUsed=`echo ${line} | awk -F | {print $4}`
JVMMax=`echo ${line} | awk -F | {print $6}`
JVMUsage_1=`echo ${line} | awk -F | {print $8}`
JVMUsage=`awk BEGIN{printf ($JVMUsage_1)*100}`
PermUsed=`echo ${line} | awk -F | {print $10}`
PermMax=`echo ${line} | awk -F | {print $12}`
PermUsage_1=`echo ${line} | awk -F | {print $14}`
PermUsage=`awk BEGIN{printf ($PermUsage_1)*100}`

if [ $JVMUsage -ge 8000 -o $PermUsage -ge 8000 ]
then
    ((MONI_JVM_COUN++))
    echo "${InstanceName} JVMUsed is ${JVMUsed},Please check! "
fi

elif [ "${MonitorItem}" == "CurrentThread" ] ##對線程運(yùn)行狀態(tài)進(jìn)行判斷
then
CurrentThread=`echo ${line} | awk -F | {print $4}`
MaxThread=`echo ${line} | awk -F | {print $6}`
ThreadUsage_1=`echo ${line} | awk -F | {print $8}`
ThreadUsage=`awk BEGIN{printf ($ThreadUsage_1)*100}`
BusyThread=`echo ${line} | awk -F | {print $10}`

if [ $ThreadUsage -ge 8500 ]
then
    ((MONI_THREAD_COUNT++))
    echo "${InstanceName} CurrentThread is ${CurrentThread},Please check! "
fi

elif [ "${MonitorItem}" == "CurrentQueue" ] ##對隊(duì)列運(yùn)行狀態(tài)進(jìn)行判斷
then
CurrentQueue=`echo ${line} | awk -F | {print $4}`
MaxQueue=`echo ${line} | awk -F | {print $6}`
QueueUsage_1=`echo ${line} | awk -F | {print $8}`
QueueUsage=`awk BEGIN{printf ($QueueUsage_1)*100}`

if [ $QueueUsage -ge 8000 ]
then
((MONI_QUEUE_COUNT++))
echo "${InstanceName} CurrentQueue is ${CurrentQueue},Please check! "
fi

elif [ "${MonitorItem}" == "dataSourceName" ] ##對JDBC數(shù)據(jù)源運(yùn)行狀態(tài)進(jìn)行判斷
then
dataSourceName=`echo ${line} | awk -F | {print $4}`
CurrentActiveNum=`echo ${line} | awk -F | {print $6}`
createJDBCCount=`echo ${line} | awk -F | {print $8}`
maxJDBCCount=`echo ${line} | awk -F | {print $10}`
spareJDBCCount=`echo ${line} | awk -F | {print $12}`
JDBCUsage_1=`echo ${line} | awk -F | {print $14}`
JDBCUsage=`awk BEGIN{printf ($JDBCUsage_1)*100}`

if [ $JDBCUsage -ge 9500 ]
then
    ((MONI_JDBC_COUNT++))
    echo "${InstanceName} dataSourceName is ${dataSourceName},Please check! "
fi
else
echo "${MonitorItem}" is error!
fi

done
else
echo "$LOG_DIR"/bes.log is wrong,please check!
fi

具體配置以及結(jié)果展示

1. 新建原子操作，引用的腳本為上述腳本，輸出參數(shù)如下圖所示：

2. 新建六個(gè)巡檢項(xiàng)，引用的為上述原子操作，分別對應(yīng)不同的巡檢內(nèi)容，具體如下圖所示：

3. 新建巡檢任務(wù)，引用上述六個(gè)巡檢項(xiàng)，具體執(zhí)行結(jié)果如下圖所示。

通過執(zhí)行一鍵巡檢，點(diǎn)擊查看詳情，很清晰明了的知道當(dāng)前寶蘭德BES中間件狀態(tài)是否有異常，結(jié)果展示的兩個(gè)分布圖全為綠色則表明狀態(tài)正常，如若有紅色則說明存在異常的實(shí)例狀態(tài)，點(diǎn)擊異常項(xiàng)查看具體的異常信息具體解決。