redisCheckMem脚本

Posted 2020-10-10 运维的自我修养

最近维护的redis cluster需要扫描每个实例的内存使用率，首先我们需要获取实例已经使用的内存，获取实例的最大内存配额，两个值相比就能获取到内存使用比例。

实例的最大内存获取方法： 

$REDIS_CLI -h $host -p $port config get maxmemory|tail -1|awk ‘{printf "%.4f\n", ($1 / 1024 /1024 /1024)}‘

实例的已使用内存获取方法：

$REDIS_CLI -h $host -p $port info memory|awk -F : ‘/used_memory:/ {printf "%.4f\n", ($2 /1024/1024/1024)}‘

 

获取到的值单位是字节，我们需要更换成G为了更方便的直观的读取。

最后使用已经使用的内存除以最大的内存就是内存使用的比例，如果超过90%则报警，会进行内存的扩容或数据的清理操作。

实例动态扩容内存的方法： 

# 计算方法 ， 例如要分配25G  则： 25*1024*1024*1024 = 26843545600
config set maxmemory 26843545600

　　

因为集群有太多的redis实例，我写了一个扫描的脚本：

[[email protected]]# cat kv2HostList
192.0.171.150
192.0.171.152
192.0.171.153
192.0.171.155
192.0.171.156
192.0.171.158
192.0.171.159
192.0.171.160

　　

#!/bin/bash
###########################################
#
# 检查KV集群里面每个实例的内存使用入库
#
###########################################
STARTPORT=8381
ENDPORT=8400
WORKDIR="/software/scripts/redisCheckMem"
REDIS_HOST_FILE="$WORKDIR/kv2HostList"
REDIS_CLI=‘/data/redisApp/bin/redis-cli‘
TMP_DB_FILE="$WORKDIR/DBfile.txt"
# 定义内存使用比例的阀值
W_NUM=‘90‘
# Define color
red() {
  echo -e "\033[31m $1 \033[0m"
}
green() {
  echo -e "\033[32m $1 \033[0m"
}
yellow() {
  echo -e "\033[33m $1 \033[0m"
}
AutoCheck() {
    datetime=`date +%Y%m%d%H`
    >$TMP_DB_FILE
    for host in `cat $REDIS_HOST_FILE`
        do
           echo "------------------------------------------------"
           for port in `seq $STARTPORT $ENDPORT`
            do
            Max_mem=$($REDIS_CLI -h $host -p $port config get maxmemory|tail -1|awk ‘{printf "%.4f\n", ($1 / 1024 /1024 /1024)}‘)
            Used_mem=$($REDIS_CLI -h $host -p $port info memory|awk -F : ‘/used_memory:/ {printf "%.4f\n", ($2 /1024/1024/1024)}‘)
            P_used_mem=$(awk "BEGIN{print $Used_mem/$Max_mem*100 }")
            yellow "Server:[$host:$port] MemoryInfo : "
            echo -e "\t Max_memory: $Max_mem G"
            echo -e "\t Used_memory: $Used_mem G"
            num=$(echo $P_used_mem|awk -F . ‘{print $1}‘)
            if [[ $num -gt $W_NUM ]];then
                red "\t Percentage used: $P_used_mem"
                red "\t Warring: 内存使用率过高，请关注!!!"
            else
                green "\t Percentage used: $P_used_mem"
            fi
            echo -n "insert into bdcsc2_clustermonitor_kv (date,ip,port,mem_use,kv) values " >> $TMP_DB_FILE
            echo "(‘$datetime‘,‘$host‘,‘$port‘,‘$Used_mem‘,‘kv2‘);" >> $TMP_DB_FILE
            sleep 0.5
        done
    done
}
Report2db() {
mysql -h192.168.0.47 -uroot -xxx-D report < $TMP_DB_FILE
}
case "$1" in
check)
        AutoCheck
        ;;
report2db)
        AutoCheck
        Report2db
        ;;
*)
        echo "Usage: $0 {check | report2db}"
esac